问题描述
有三台服务器正在运行包含在 tmux 会话中的 Python 程序，这些程序执行数据分析任务。目前的方法是通过 SSH 连接到每台服务器，连接到相应的 tmux 会话，并在命令行中观察输出。然而，这种方法很繁琐。用户希望找到一个解决方案，可以自动化地同时监控多台服务器上程序的进度（命令行输出）。他们最好希望能有一个 Web 用户界面的解决方案，但也可以接受命令行界面的解决方案。
解决方案
请注意以下操作可能涉及不同工具或服务，具体操作可能因版本或设置不同而有所差异。
使用 Graylog 进行日志聚合与监控
一个比较适合的解决方案是使用 Graylog 进行日志聚合和监控。Graylog 是一个开源的日志管理和分析平台，它可以帮助你收集、分析和监控多台服务器上的日志信息。
步骤
在一台服务器上设置 Graylog。你可以在一台能够被所有应用主机访问的服务器上部署 Graylog（如跳板机）。确保这台服务器可以访问所有其他服务器。
安装和配置 Graylog 所需的依赖，包括 MongoDB 和 ElasticSearch。
将应用程序的日志发送到 Graylog。你可以使用 GELF（Graylog Extended Log Format）消息格式将日志从应用程序发送到 Graylog。
设置 Graylog 的告警功能，以便在出现特定事件时触发警报。你可以根据日志中的事件设置警报规则，当某个事件满足规则条件时，Graylog 将触发警报。
优势
Graylog 提供了以下功能，适用于你的需求：
– Web 用户界面：可以通过 Web 用户界面轻松查看和分析来自多台服务器的日志。
– 多用户能力：不同用户可以登录 Graylog 进行日志查看和分析，有不同的权限控制。
– 告警功能：可以设置基于日志事件的告警规则，一旦满足条件，Graylog 将触发警报。
– 实时查看和分析：通过 Graylog 的实时功能，你可以实时地查看和分析日志，以便快速识别问题。
使用 ELK Stack 进行日志聚合与监控
另一个选择是使用 ELK Stack（Elasticsearch、Logstash 和 Kibana）进行日志聚合和监控。这也是一个广泛使用的解决方案，用于收集、分析和可视化日志数据。
步骤
在一台服务器上设置 ELK Stack。你可以在一台能够被所有应用主机访问的服务器上部署 ELK Stack。
安装和配置 Elasticsearch、Logstash 和 Kibana。
使用 Logstash 将应用程序的日志从各个服务器发送到 Elasticsearch 中。
使用 Kibana 构建仪表板来可视化日志数据。你可以设置不同类型的图表和可视化元素，以便更好地监控日志事件。
优势
ELK Stack 提供了以下功能，适用于你的需求：
– Elasticsearch 用于存储和索引日志数据，可以快速地搜索和查询大量的日志事件。
– Logstash 用于收集、转换和发送日志数据，支持多种日志源和格式。
– Kibana 提供了强大的可视化工具，可以创建定制的仪表板，展示日志数据的各种信息。
– 实时监控：ELK Stack 支持实时监控，可以随时查看最新的日志事件。
使用集中式 tmux 进行监控
如果你需要一个快速的临时解决方案，你可以考虑使用集中式的 tmux 会话来监控多台服务器的日志。
步骤
在一台服务器上启动一个
tmux会话，该服务器可以访问所有其他服务器。在这个集中的
tmux会话中，使用ssh命令连接到每台服务器，并在不同的窗格中使用tail命令来观察日志文件。你可以使用
tmux的拆分窗格功能，将多个服务器的日志同时显示在一个终端中。
优势
虽然这种方法不如前两种解决方案那么自动化和全面，但它是一个快速的临时解决方案，适用于紧急情况。通过集中的 tmux 会话，你可以在一个终端中同时观察多台服务器的日志，避免了在多个终端之间切换。
总结
针对监控多台服务器上程序的进度，你可以选择使用 Graylog 进行日志聚合与监控，使用 ELK Stack 进行日志处理与可视化，或者使用集中式的 tmux 会话进行临时监控。每种解决方案都有其优势和适用场景，你可以根据自己的需求选择合适的方案。同时，也可以考虑将监控和告警的自动化纳入长期计划，以便更好地管理和维护你的服务器环境。