新手问题想问一下 GitHub Pages 的页面怎么让百度能抓取到

lokyoung · September 20, 2015 · Last by lokyoung replied at September 23, 2015 · 3830 hits

如题，我的博客是用 github pages 进行建立的。 github pages 貌似会拒绝百度爬虫的抓取（说是由于百度爬虫抓取频率过于频繁导致）。我也尝试使用了国内的 cdn，但用百度站长进行测试还是无法抓取。虽说技术博客给不给百度收录也没什么影响，但还是想请教下论坛的各位前辈有没有办法解决这个问题。 Thanks!

Rei #1 September 20, 2015

我才发现百度只收录了我博客两个页面。

lokyoung #2 September 20, 2015

#1 楼 @rei 好像访问量高的才会收录，你的很高所以给收录了吧。我的直接爬取失败。。

embbnux #3 September 21, 2015

百度站长平台提交看看

lokyoung #4 September 21, 2015

#3 楼 @embbnux 提交了，爬虫还是无法抓取。

bastengao #5 September 22, 2015

github pages 似乎屏蔽了百度爬虫，换 gitcafe pages 就没问题了。

huobazi #6 September 22, 2015

我的被收录了啊 http://www.baidu.com/s?ie=utf-8&f=8&rsv_bp=1&rsv_idx=1&tn=baidu&wd=site%3Ahuobazi.aspxboy.com&oq=site%253Ahuobazi.aspxboy.com&rsv_pq=9e09234a0000199b&rsv_t=3f791XNKA63ka6wNH0Juo4Mt%2BDnCBp6I4bU2au75e12PIaGBWjm7D1vC5aruEz5MDH7DV%2BX%2B&rsv_enter=0

michael_roshen #7 September 22, 2015

因为我用的 iteye 吗？http://www.baidu.com/s?wd=site%3Amichael-roshen.iteye.com&pn=0&oq=site%3Amichael-roshen.iteye.com&ie=utf-8&rsv_idx=1&rsv_pq=a577f84c000036a9&rsv_t=c618FuYUCXyaUtI9D8%2FOyPwYI510bu3xegd2FlT4yrmX8HInApBMSqL7tU0

lokyoung #8 September 23, 2015

#5 楼 @bastengao 确实是这样。。不过不想换。。好矛盾。

lokyoung #9 September 23, 2015

#6 楼 @huobazi 可能是因为访问量高吧。有这么个说法。

lokyoung #10 September 23, 2015

#7 楼 @michael_roshen iteye 肯定可以的。

You need to Sign in before reply, if you don't have an account, please Sign up first.