apache日志为什么不记录百度蜘蛛?这个问题相信很多初学者都基本碰到了,apache日志默认是不记录百度蜘蛛、谷歌和各大搜索引擎的蜘蛛程序的,但只需要修改一个地方就可以解决这个问题,现在就直接将答案写出来:
比如曾经有个朋友在百度知道中提问:
<IfModule log_config_module>
LogFormat “%h %l %u %t \”%r\” %>s %b \”%{Referer}i\” \”%{User-Agent}i\”" combined
LogFormat “%h %l %u %t \”%r\” %>s %b” common
<IfModule logio_module>
LogFormat “%h %l %u %t \”%r\” %>s %b \”%{Referer}i\” \”%{User-Agent}i\” %I %O” combinedio
</IfModule>
CustomLog “logs/access.log” common
</IfModule>
这是我目前的设置,不记住主机名
哪位给我提供个范本 记录访问明细和主机头记录蜘蛛的
1、打开httpd.conf文件找到以下部分:
LogFormat “%h %l %u %t \”%r\” %>s %b \”%{Referer}i\” \”%{User-Agent}i\”" combined
LogFormat “%h %l %u %t \”%r\” %>s %b” common
LogFormat “%{Referer}i -> %U” referer
LogFormat “%{User-agent}i” agent
具体有关LogFormat的用法请参照:
2、接着我们继续向下移动,找到虚拟主机配置段,也就是VirtualHost段,这个是由你自己来配置的。本站的虚拟主机的日志文件是这样设置的:
如果你想记录百度蜘蛛的访问全称,就按色部分设置:
CustomLog /var/html/faq/logs/linux520-access.log combined
如果不想记录百度蜘蛛的头部分,则如下设置:
CustomLog /var/html/faq/logs/linux520-access.log common
按照以上设置一下,看看你的日志文件是否发生变化了。
文章了链接源自:http://hi.baidu.com/vbkan/blog/item/8629fa01c17ae5107aec2c41.html
分享到:
相关推荐
apache日志文件说明
python apache日志分析 INTERNATIONAL MEDICAL SUMMIT FORUM python apache日志分析 任务背景 操作系统和许多程序会产生各种错误信息、警告信息和其他的提示信息,这种信息会记录到日志里面。系统日志里面有很多东西...
记录一次ssh日志分析和apache日志分析
本文介绍了apache日志如何切割,通过自动切割apache日志切割,我们可以更方便查阅日志
网站蜘蛛记录器是由蓝途工作室独立开发的又款免费程序.主要功能是记录各大搜索引擎对网站采集情况.实时记录百度,谷歌蜘蛛的爬行轨迹,分析.达到更好的优化网站的目的。程序模块:系统首页:管理员登陆后台首页,显示...
很多apache日志分析工具都是要安装到服务器上的,而且安装非常麻烦,于是我写了一个单机版(exe,Windows),方便大家分析apache访问日志,绿色版的,直接解压就可以用。 功能: 1、导入apache访问日志; 2、访问...
在kali,访问日志被记录在”/var/log/apache2/”中,在这个文件夹中三个后缀名为“.log”的文件中(windows则保存在后缀名为“.txt”的文件中)。 日志文件 查看日志文件 apache日志配置 远程主机IP E-mail(常为空白...
如何按日期生成apache日志文件及限制apache日志文件大小
Kali系统自带了apache的相关内容,只需要简单的一行代码“service apache start”就可以运行,但在运行前,我们需要进行一定的设置,在kali中apache默认的配置文件为“/etc/apache2/apache2.conf”,我们可以修改这...
针对Apache的Log文件太大的问题,采用每日一个日志文件及选择性记录日志的方式来处理这种问题。
apache在生产环境下遇到的诸多问题,此日志仅限于本人在Linux环境下总结下的问题,酌情下载,希望能帮到你们
天智Apache日志分析器是一款免费的Apache日志分析工具,使用VC++开发,专用于分析Apache网站日志,可监视、查看和分析Apache服务器日志,统计日志中正常访问和错误日志等信息。
实验一:apache日志配置 实验目的 修改apache主配置文件中的日志配置 实验内容 在kali中找到主配置文件 修改日志配置 访问服务器产生日志 查看日志 实验环境 Kali系统 实验步骤 1.在kali中找到apache的主配置文件...
shell 处理apache日志入库 awk分析apache日志为*.sql文件 sqlplus写入oracle
apache日志hadoop大数据 hive与hbase是如何整合使用的
debian下apache日志集中管理,日志服务器配置
logging-log4j2, Apache日志记录Log4J2镜像 Apache Log4J 2Apache是对 Log4J的升级,它提供了比它的前辈 Log4J 1. x,的显著改进,并提供了许多改进,同时解决了soa架构中一些固有问题。 在Github上请求请求通过发送...
apache日志分析系统免费版V1.6,感觉功能不错,这边留个底以后会用到!
Apache日志查看器是一个免费的工具,它允许您监视、查看和分析Apache的日志。
apache,日志,分析系统,awStats,完全教材