在百度SERP出图的注意点

和百度官方确认了下,原理是如果想要自己的页面在百度SERP中出图则一定要保证robots.txt中没有对Baiduspider-image做封禁,事实是如果对Baiduspider-image封禁了的话,百度会使用Baiduspider/2.0来抓图片,但是如果你连Baiduspider 2.0都封禁了的话,那就bye bye了。 问题是有些网站(尤其是自建cdn服务器的网站)的图片会放在云存储上,站长会利用src来引用。这个时候就一定要注意外链服务器域名的robots.txt文件,有些黑心云存储提供商为了降低服务器宽带负载会对所有爬虫做禁止抓取,后果自然是呵呵了。 这里推荐下七牛… 阅读全文