我必须分析一个24*7连续生成的日志文件。因此，数据将是巨大的。我将拥有生成日志文件的凭据。但是，我如何才能获得流数据(我的意思是像任何免费的工具或进程一样)，以便在我的python代码中使用它从日志流中提取一些所需的信息，并使用这些数据准备一个实时仪表板。
浏览 19提问于2020-02-20得票数 1
我必须分析两个不同应用程序的服务器日志。日志将全天候连续生成。我有生成日志的服务器的凭据。我需要将这些日志数据发送到kafka，并使用python (通过应用regex)从这些日志中提取一些错误信息，并使用我提取的数据准备一个实时仪表板。如何获取持续生成到kafka的日志数据？我需要使
浏览 14提问于2020-03-02得票数 0
当金额给出时，智能合同将开始使用Metamask钱包进行审批。我正在Rinkeby网络上测试它。我的项目顺序如下：
1-不断提取数据以便弹性搜索，因此事务日志必须始终是最新的，2-然后不断地将数据提取到我的python后端。3-根据个人资料(地址)分析数据。4-创建一个智能仪
浏览 0提问于2020-04-21得票数 1
该脚本将每5分钟运行一次，并使用Python的seek和tell方法从最后解析的位置打开日志文件。这阻止了我每5分钟解析一次10 it的日志文件，而我所需要的就是它的末尾的新信息(没有日志轮换，记得吗？)。经过思考，我意识到我所做的一切就是从日志文件中提取信息，并将它们放入数据库中……将数据从一个位置移动到另一个位置:/
那我还能怎么做
浏览 1提问于2010-07-25得票数 2
2回答
这就是我计划为一个项目构建我的实用程序的方式：
提取根据所提供的参数读取日志结果文件以提取相关结果。问题是，我不想等待logdump完成对日志的写入来开始处理它。同样，我需要记住，直到我已经阅读了日志，才开始提取</em
浏览 5提问于2010-09-09得票数 7
回答已采纳
我不知道如何提取Azure DNS查询日志的数据(以及首选的方式)，以便进一步分析(作为原始事件)。我想将这些数据提取到事件中心进行进一步的连续处理。我是否可以为DNS日志使用/创建诊断设置，或者像将平台日志导出到不同的目的地(event /azure存储)一样？
浏览 2提问于2022-04-18得票数 0
回答已采纳
我希望将我的subversion日志中的所有提交消息连接到一个文本文件中，最好使用windows上的svn命令行。r1000消息
我认为上面的内容很清楚，但我不想在日志中看到这样的信息：没有元数据，我只想要提交消息
浏览 16提问于2010-06-10得票数 2
回答已采纳
我需要编写一个python脚本来读取大型日志文件(1GB+)，提取每一行的IP地址，存储这些IP，删除重复的IP，在另一个文件中找到与这些IP相关的主机名，并将主机名重写为包含原始数据的新日志文件。现在的问题是:处理内存、文件等的最佳方法是什么？我是说，我看到了两种方法：
读取原始日志文件，提取IP并写入新文件(tmp_IP
浏览 1提问于2018-07-10得票数 0
我正在用python编写一个框架来实现一些服务器。它们连续运行，等待作业，当找到一个或多个作业时，它们可以处理它，启动一个或多个线程来处理它，或者启动子进程来处理它。当它正在寻找作业日志数据时，应该将数据放入一个文件中，该文件每天都会轮换。每个作业的日志数据将进入一个单独的作业日志文件，其名称基于作业ID。
这是我第一次真正尝试使用</e
浏览 0提问于2015-07-07得票数 1
现在，我们正在尝试为未使用的实例执行清理活动，并基于我们已经启动实例的用户名。我尝试从S3桶下载cloudtrail日志，并尝试过滤用户名和“RunInstances”事件，以便找到启动实例的用户以及实例详细信息。下面是我用来下载所有cloudtrail日志到一个文件夹中的脚本，解压缩它们并通过'RunInstances‘事件过滤实例，并给出实例的计数。--我需要帮助从每个日志中检索用户名，使用“RunIn
浏览 2提问于2016-08-24得票数 0
回答已采纳
我的程序的各个部分都可以工作，但是我很难弄清楚如何使它们全部工作，together.also，我的温度控制模块是python，客户端是C#。就物理元件而言，我有一个设置温度和打开和关闭加热器的键盘和一个显示温度数据的液晶屏幕，当然还有一个温度传感器。到目前为止，所有的硬件都运行良好，网络功能的每个单独部分都可以工作，但
浏览 2提问于2017-06-22得票数 1
回答已采纳
因此，我试图建立一个自动化的网络应用程序，我可以上传pdf文件，然后一个python代码将运行，提取某些数据从上传的pdf文件。我知道如何做一个python代码，从我的本地系统获取一个pdf，并提取所需的数据，但我如何使代码使用上传的pdf文件的网页应用？我计划部署这个网站，在这个网站上，python代码可以在任何使用该网站的系统上运行，那么如何将上传的文
浏览 2提问于2022-07-01得票数 0
1回答
我正在尝试设计一个具有用户界面的应用程序，可以在其中加载日志文件。A, B, C, D, E6, 7, 8, 9,10在上面的例子中，我只想提取列D和A。只有当列A值存
浏览 0提问于2014-06-22得票数 0
我有应用程序日志文件，这些文件使用File节拍被传送到logstash。日志文件将包含类似于以下内容的内容，其中包含模块名称和在其中处理所需的时间。#DE_ONL_DC_SERVER1_NODE05_PRD##[8/10/2020#11:25:45:451] #O#-#-#-#Module1#1#-#5#-#-#-#CoreB#-
我只想从上面的日志中提取3个字段，模块名{Module1}，<em
浏览 6提问于2020-08-10得票数 0
回答已采纳
我正在处理一个大型的CAN日志，并且只能访问.mf4文件。我想知道您是否可以获得发送某个信号的时间戳，就像加载.log文件一样。我只遇到过mdf.to_dataframe()命令，它需要一个光栅，并完全破坏采样时间。我需要查看CAN线路上的设备发出连续消息所需的时间。
谢谢
浏览 57提问于2021-06-10得票数 0
我想从一些systemd日志文件中连续提取数据。我有一个正则表达式，它提取我感兴趣的内容。我不确定的是如何不断地消化这个文件。我使用tokio来保持异步。我想知道我是否应该定期(例如每秒打开一次)打开该文件，读入缓冲区，直到前面的最后一行匹配为止，如果我能够保持该文件打开(我认为从我的Python经验来看这不是一个好主意，但我不确定这在rust中是否合适
浏览 2提问于2022-03-27得票数 0
回答已采纳
如果我将它保存到日志文件(例如"cmd > logfile")中，我将运行大量终端输出，这将超过我的磁盘空间。现在我想跟踪整个终端输出，但同时我想将特定的数据/行/值从这个输出保存到一个文件中。或者作为替代:是否可以保存日志文件，提取所需的数据，然后删除处理过的行以避免生成巨大的日志文件？
浏览 1提问于2020-05-07得票数 0
回答已采纳
1回答
我在做什么当我将提交作业发送给AWS批处理时，问题就出现了；该服务从ACR ( amazon容器存储库)中提取映像，并生成一个计算环境。“：在$PATH中找不到可执行文件
我试图传递命令来回显env $PATH，但是没有成功地得到响应，并导致了类似的错误。告诉doc
浏览 1提问于2021-07-23得票数 0
回答已采纳
2回答
示例第一行事件日志文件，这里我成功地提取了除最后一个键值对(即属性)之外的所有内容。attributes":{"OfferID":"20186",大家好，我正试图从事件日志文件中提取内容，如附件中所示的图像.As所示
浏览 5提问于2016-07-10得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
