apache日志如何记录爬虫地址 日志格式化格式

枫爱若雪 发布于 2013/05/14 09:38
阅读 469
收藏 1

    apache需要记录爬虫记录来做SEO优化,找了好半天都没找到,各位谁有格式化代码麻烦给我一下,谢谢

    LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined

    如上是我的格式化方法

    得到的日志是如下这样的

    119.180.98.134 - - [14/May/2013:08:59:38 +0800] "POST /tools/ajax.jsp HTTP/1.1" 200 4367

    但是我希望得到如下:

     220.181.108.180 – - [25/May/2011:20:21:56 +0800] “GET / HTTP/1.1″ 200 12447 “-” “Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)”    

      谁有例子给我下,谢谢。

    @红薯 @皮总 @逝水fox

加载中
返回顶部
顶部