树懒先生的博客

为搜索引擎开启回源服务

为什么要对搜索引擎回源呢?

如果爬虫抓取到了多个IP甚至几百个IP,那么会认为你的网站是镜像网站,会被大批量大幅度的进行K站行为,这一行为在百度比较严格,百度比较打击镜像网站与盗版网站还有采集网站类,起初明显的是收录慢,索引持续不涨或往下掉,平时能够秒收录,到后来不能秒收录了。一个长久不换的IP对于网站来说,能让爬虫习惯抓取,认为这个IP就是网站的家,哪也不去,换了IP后等于换了主人不认人了。

树懒先生举个栗子可能更好理解:有一座小房子,从小你生活在这里,有一天你有钱了,全世界都有你的大房子,可是你还会怀念原来的小房子,因为只有那里才会有家的感觉;同样的道理,搜索引擎也是认家的,如果你的网站没有“家”的感觉(不回源),那么搜索引擎对网站的依恋就会大幅降低,甚至不回家了(不收录)。

树懒先生最近一直走进了一个怪圈,接入了CDN之后就总是想着让CDN给搜索引擎回源,结果通过站长工具的抓取,发现,CDN的回源并不理想,后来经过明月大佬的指点,忽然醒悟,何不在DNS解析层面就给搜索引擎回源呢,DNSPOD看来是已经支持了这个功能了,直接解析源站IP就好了。Bingo~