Apache Commons IO Tailer 提供旧的日志消息

Question

我的代码如下。

public static void main(String[] args) {
    // TODO code application logic here
    File pcounter_log = new File("c:developmenttemptest.log");
try {
    Tailer tailer = new Tailer(pcounter_log, new FileListener("c:developmenttemptest.log",getLogPattern()), 5000,true);
    Thread thread = new Thread(tailer);
    thread.start();
} catch (Exception e) {
    System.out.println(e);
}
}
public class FileListener extends TailerListenerAdapter {

 public void handle(String line) {
        for (String logPattern : pattern) {
            if (line.contains(logPattern)) {
                logger.info(line);
            }
        }
    }
}

在这里getLogPattern()返回一个包含 [info，error，abc.catch，warning] 等值的ArrayList。运行此代码时，我收到旧日志消息，然后是新日志消息。即输出是这样的：

20 May 2011 07:06:02,305  INFO FileListener:? - 20 May 2011 07:06:01,230 DEBUG   - exiting readScriptErrorStream()
20 May 2011 07:06:55,052  INFO FileListener:? - 20 May 2011 07:06:55,016 DEBUG  - readScriptErrorStream()
20 May 2011 07:06:56,056  INFO FileListener:? - 20 May 2011 07:06:55,040 DEBUG   - exiting readScriptErrorStream()
20 May 2011 07:07:01,241  INFO FileListener:? - 20 May 2011 07:07:01,219 DEBUG  - readScriptErrorStream()
20 May 2011 07:07:02,245  INFO FileListener:? -  20 May 2011 07:07:01,230 DEBUG   - exiting readScriptErrorStream()
20 May 2011 07:07:55,020  INFO FileListener:? -  20 May 2011 07:07:55,016 DEBUG  - readScriptErrorStream()
20 May 2011 07:07:56,024  INFO FileListener:? - 20  2011 07:07:55,030 DEBUG   - exiting readScriptErrorStream()
20 May 2011 07:08:01,269  INFO FileListener:? -  20 May 2011 07:08:01,227 DEBUG - readScriptErrorStream()
20 May 2011 07:08:02,273  INFO FileListener:? -  20 May 2011 07:08:01,230 DEBUG   - exiting readScriptErrorStream()
20 May 2011 07:08:21,234  INFO FileListener:? -  20 May 2011 06:40:02,461 DEBUG  - readScriptErrorStream()
20 May 2011 07:08:22,237  INFO FileListener:? -  20 May 2011 06:40:02,468 DEBUG   - exiting readScriptErrorStream()
20 May 2011 07:08:23,242  INFO FileListener:? -  20 May 2011 06:41:01,224 DEBUG - readScriptErrorStream()
20 May 2011 07:08:24,250  INFO FileListener:? -  20 May 2011 06:41:01,232 DEBUG   - exiting readScriptErrorStream()
20 May 2011 07:08:25,261  INFO FileListener:? -  20 May 2011 06:42:01,218 DEBUG  - readScriptErrorStream()
20 May 2011 07:08:26,265  INFO FileListener:? -  20 May 2011 06:42:01,230 DEBUG   - exiting readScriptErrorStream()
20 May 2011 07:08:27,272  INFO FileListener:? -  20 May 2011 06:43:01,223 DEBUG  - readScriptErrorStream()
20 May 2011 07:08:28,275  INFO FileListener:? -  20 May 2011 06:43:01,231 DEBUG   - exiting readScriptErrorStream()

如何避免像这样从日志文件中获取旧的日志消息？

Answer 1

哦，天哪，我浪费了一整天的时间，以为这是我狡猾的线程，但现在我看到其他人分享了我的痛苦。哦，好吧，至少我不会再浪费一天时间看它。

但我确实看了源代码。我确定 Tailer.java 文件中发生了错误：

boolean newer = FileUtils.isFileNewer(file, last); // IO-279, must be done first
...
...
else if (newer) {
    /*
    * This can happen if the file is truncated or overwritten with the 
    * exact same length of information. In cases like this, the file
    * position needs to be reset
    */
    position = 0;
    reader.seek(position);
...

似乎在写入数据之前，文件修改数据可能会更改。我不是为什么会这样的专家。我正在从网络获取我的日志文件，所以也许正在进行各种缓存，这意味着您不会担心较新的文件将包含更多数据。

我已经更新了源代码并删除了本节。对我来说，文件被截断/重新创建具有完全相同字节数的机会很小。我引用的是 10MB 滚动日志文件。

我看到这是一个已知问题（ IO-279 链接 这里 ）.但是，它被标记为已解决，显然情况并非如此。我将联系开发人员，看看是否有内容在管道中。似乎他们对修复的看法与我相同。

Answer 2

https://issues.apache.org/jira/browse/IO-279?page=com.atlassian.jira.plugin.system.issuetabpanels:all-tabpanel

您使用的是哪个版本的 commons.io？我在 2.0.1 中遇到了此错误。我更新到2.3，它似乎工作正常（到目前为止）

Answer 3

我知道

这是一个非常古老的线程，但我刚刚遇到了类似的问题。事实证明，Tailer 有两个线程同时读取文件。

我将其

追溯到我如何创建 Tailer 实例。我没有使用他们的 3 个建议（静态帮助程序方法、执行器或线程）之一，而是使用静态帮助程序方法创建了实例，然后将创建的实例输入到一个 Thread 中，这似乎会导致两个线程读取文件。

一旦我纠正了这一点（通过删除对静态帮助程序方法的调用并仅使用重载的 Tailer 构造函数之一和一个线程），问题就消失了。

希望这对某人有所帮助。