[网站优化]为什么百度蜘蛛不来抓取网站
百度蜘蛛抓取网站内容?
呵呵,楼主可 能是理解出了 偏差。蜘蛛是从“链接”上 来到你的网站, 回从你的网站 上住区 答内容。而日志文件可以记录到蜘蛛的来抓取的动作,比如抓取的时间、抓取文件的大小、文件名、抓取是否成功等等。你可以从日志中获取这些内容,这个日志就是在log文件夹里。一般服务器中都还有这个日志,如果没有,你可以向空间服务商所要,减压、txt打开就可以。有的文件会很大,就要用其它东西打开了。希望回答对你有帮助。
呵呵, 来楼主可能是理解出了 自偏差 。蜘蛛是从“链接”上来到你的网站 ,从你的网站上 住区内容。而日志文件可以记录到蜘蛛的来抓取的动作,比如抓取的时间、抓取文件的大小、文件名、抓取是否成功等等。你可以从日志中获取这些内容,这个日志就是在log文件夹里。一般服务器中都还有这个日志,如果没有,你可以向空间服务商所要,减压、txt打开就可以。有的文件会很大,就要用其它东西打开了。希望回答对你有帮助。
为什么我的网站没有蜘蛛抓取?
原因很 多的 抄,你是看的网站 的日志,发现没有 蜘蛛访问吗?
如果是蜘蛛直接没有访问的话,一 般就是空间、域名、程序的问题了。
看一下你空间下,是不是很多作弊的网站;
你的域名之前是不是做过违法的事情;
网站的robots是否写得正确,然后去站长平台,抓取诊断一下,看看是否正常。
如果是抓取了但是没有收录的话,一般就是网站的内容问题了,内容是违法的、还是触犯了搜索引擎算法、内容是采集的等等。