Goaccess不解析所有文件

时间:2016-01-20 12:04:55

标签: logging nginx goaccess

我有一个nginx自定义日志文件,如:

{ "timestamp": "2015-12-20T12:30:40+03:30", "remote_addr": "80.253.148.194", "remote_user": "-", "body_bytes_sent": "0", "request_time": "0.000", "status": "304", "request": "GET /repository/9/13350-000036.png HTTP/1.1", "request_method": "GET", "http_referrer": "http://domain.ltd/profile/category/1425", "http_user_agent": "Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:42.0) Gecko/20100101 Firefox/42.0" } { "timestamp": "2015-12-20T12:30:40+03:30", "remote_addr": "80.253.148.194", "remote_user": "-", "body_bytes_sent": "0", "request_time": "0.000", "status": "304", "request": "GET /repository/9/13349-000018.png HTTP/1.1", "request_method": "GET", "http_referrer": "http://domain.ltd/profile/category/1425", "http_user_agent": "Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:42.0) Gecko/20100101 Firefox/42.0" } { "timestamp": "2015-12-20T12:27:24+03:30", "remote_addr": "79.175.174.23", "remote_user": "-", "body_bytes_sent": "139008", "request_time": "0.298", "status": "206", "request": "GET /repository/9/56766da1202f7.mp4 HTTP/1.1", "request_method": "GET", "http_referrer": "-", "http_user_agent": "Lavf/56.4.101" }...

它包含3792061行。

我已经设置了日志格式并且工作正常,但是在完成工作后,会丢失一些数据,例如报告中没有/9/个文件。 HERE是我的goaccess报告。

我的命令是: # goaccess -o json --static-file=.mp4 --static-file=.MP4 --ignore-panel=VISITORS --ignore-panel=REQUESTS --ignore-panel=NOT_FOUND --ignore-panel=HOSTS --ignore-panel=OS --ignore-panel=BROWSERS --ignore-panel=VISIT_TIMES --ignore-panel=VIRTUAL_HOSTS --ignore-panel=REFERRERS --ignore-panel=REFERRING_SITES --ignore-panel=KEYPHRASES --ignore-panel=GEO_LOCATION --ignore-panel=STATUS_CODES --sort-panel=REQUESTS_STATIC,BY_BW,DESC --debug-file debug.log --invalid-requests invalid.log -f ./access.json > data.json

无效请求文件有40行可忽略。

但之后我分割了我的文件,并在其中找到了/9/的行# cat access.json | fgrep '/9/' ./access.json > newlog.json

我在goaccess中为此日志执行完全相同的命令,我得到This输出,这很好。

卡在那里,感谢任何帮助

1 个答案:

答案 0 :(得分:2)

它只显示前366项。

  

每个活动窗口共有366个项目。最终这将是   定制的。默认情况下,这些366项在CSV中均可用   和JSON导出,以及HTML报告中的可扩展面板   (右上角)。

http://goaccess.io/man#notes