摘要:作为网上创业的一个项目,新上马的一个网站,上马网站第一天提交,第二天就收录首页,并且品牌关键词又不错的排名。第二天早上用站长工具查询时发现首页快照收录正常,快照日期是最新的,快照内容也有了,标题的收录也完整了。至此,百度快照收录空白内容的情况已完全解决。
为什么百度只显示域名而不显示标题? 为什么百度只显示域名而不显示标题? 作为一个线上商务项目,第一天提交了新上线的网站,第二天就收录了首页,并添加了品牌关键词。 排名还不错。 但是第三天出现了问题,就是百度快照只包含网址,快照内容为空。 上午,SITE被百度收录。 晚上,SITE发现被K了,到了第二天早上,SITE过了一会儿就被收录了,但是只收录了网址,关键词排名消失了。 这种情况已经维持了大约一周,但快照仍然只显示URL。 出现这个问题的时候,我一开始很担心,很担心。 难道网站刚上线就被百度惩罚了? 我忍不住想知道。 该网站不存在违法违规行为。 我只是手动发布了一些外部链接,并没有出现过多的行为。 经过百度搜索,发现有同学也有同样的问题,但没有找到有效的解决方案。 在Google上搜索的时候,我看到一个问题,那就是大家都知道淘宝屏蔽了百度蜘蛛。 你可以打开淘宝的robots.txt文件看一下。 但是,如果你在百度上搜索淘宝,仍然有搜索结果,只有网址和快照。 没有显示任何内容。 由此我想,肯定是因为蜘蛛无法抓取网页的页面内容,而拦截百度蜘蛛的东西一定是robots.txt。 我突然想起来,因为我在后台更改了CPS,根目录下的文件夹发生了变化,所以我修改了robots.txt的内容。 我想这可能是百度蜘蛛无法抓取页面的原因,因为百度对robots.txt的响应需要一些时间。
但我又想了想,这个改变并没有禁止蜘蛛爬行。 我心里觉得问题不在于这个改变。 我有一个习惯,就是在百度正式上线之前,用robots.txt来禁止蜘蛛爬行。 这是因为我担心蜘蛛会提前收录非结构化网站。 我想网站搭建完成之后,我就可以彻底放手了。 这个习惯本意是好的,对谷歌来说绝对没问题。 但大家都知道,百度比较落后,更新也比较慢。 根据大家的经验,百度对robots.txt的响应需要一些时间,所以我得出的结论是百度域名收录,我的网站,百度仍然认为它的机器人被禁止。 如果不出意外的话,过了这个适应期,百度会重新收录,因为此时我的robots文件就正常了。 从这个问题可以看出,提前禁止百度蜘蛛爬行对于百度来说未必是一个好方法。 最好的办法是在网站上线前就提前做好整个规划,在最短的时间内完成网站建设。 不像我以前那样,先禁止蜘蛛爬行,然后慢慢改进URL。 这样就可能会出现百度长时间无法对robots.txt之前的禁止状态做出反应,从而导致百度只收录网址,快照为空的情况。 发生。 下面是找到的两个看起来比较靠谱的原因:一是空间质量不好,百度蜘蛛爬取首页错误,导致快照空白。 (我用的空间不错,不存在这个问题,所以不是这个原因)。
二是网站首页程序的原因。 仔细检查网站程序的后台设置和前端文件,发现首页有两个文件,一个是index.asp,一个是index.html。 空间中配置的默认主页文件为index.html。 像往常一样,应该首先访问index.html。 是的,这是一个静态文件。 出于安全原因,index.asp 暂时停止使用。 对网站访问和后台文件生成没有影响,所以删除index.asp等待收录。 第二天早上用站长工具查看时,发现首页快照正常收录,快照日期是最新的,快照内容也有,标题完整收录。 至此,百度快照包含空白内容的情况已经彻底解决。 为此,我以为是这个原因,因为我改变了我的主页文件。 因为功能需要,我把index.html改成了index.php,所以有可能百度一直收录我的html主页。 ,无需向我收取 php 费用。 但我也否认,因为我已经删除了index.html,而且我的后台只有主页文件index.php,不存在蜘蛛会收录不存在的主页的情况。 除非首页还在百度的缓存里,但是已经一周了,已经采集了k个,采集了k个,第二天拍快照。 空间后端也使用index.php作为默认主页。 因此,我认识到的唯一原因是我使用了robots文件禁用了百度蜘蛛。 百度就比较傻了。 看了别人的案例,有的案例,爬虫禁令制定后,需要40多天的时间才能重新纳入。
因为我觉得可能是百度蜘蛛对机器人反应慢,还以为被封杀了。 以下是我在搜索过程中看到的一句话: 目前这种现象有几种可能。 2. 百度更新机器人还需要一段时间。 如果你想让它反映得更快,请先删除robots.txt。 我猜蜘蛛以前已经被禁止了。 。 我暂时同意这个方法。 我会先删除robots文件,以便百度能够快速反应,重新收录主页。 稍后我会在本文最后补充一下百度域名收录,看看有没有效果。 补充:刚刚写完这篇文章,回头看SITE,发现快照恢复了。 不知道是因为我今天投诉了快照,还是因为我把后台默认主页全部删除了。 如果能维护很长时间而不恢复的话,那就是默认主页的问题,不过我还是觉得可能是今天快照投诉的原因。 拭目以待,继续观察……