按蜘蛛分割:

第一步:找到apache的配置文件httpd.conf,在apache安装目录下的conf目录中。

第二步:在httpd.conf文件中搜索‘SetEnvIfNoCase’,在下方添加几条配置信息如下:

#专门记录某个蜘蛛记录
#百度蜘蛛配置
SetEnvIfNoCase User-Agent Baiduspider baidu_robot
#搜狗蜘蛛配置
SetEnvIfNoCase User-Agent sogou sogou_robot

第三步:依然在httpd.conf文件中搜索‘LogFormat’,在下方添加几条配置信息如下:

LogFormat "%h %t \"%{Host}i\" \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" baidu_robot
LogFormat "%h %t \"%{Host}i\" \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" sogou_robot

第四步:依然在httpd.conf文件中搜索‘CustomLog “/home/wwwlogs/access_log” common’,在下方添加几条配置信息如下:

CustomLog "/home/wwwlogs/access_baidu_log" baidu_robot      #百度日志存放文件
CustomLog "/home/wwwlogs/access_sogou_log" sogou_robot      #搜狗日志存放文件

第五步:保存,重启apache即可。