Github Pages如何被百度收录

Github Pages 不被百度蜘蛛抓取的问题

由于之前的利用百度统计导致的针对GithubDDos攻击事件,Github屏蔽了百度蜘蛛对于Github Pages的爬取收录,这对国内使用Github Pages的用户无疑是一个巨大的打击。
我也不例外,这两天用尽了各种办法,Google大法还是不错的,昨天下午提交的sitemap,今天上午就都收录了。针对百度,也搜索了很多办法,主要有以下几种:

1. 利用CDN

经论证,并没有什么卵用

2. 利用镜像,针对百度蜘蛛,解析到镜像服务器上

  • 1. 有自己的服务器或者VPS的略过,别问为什么,因为我没有,哈哈哈。
    PS:其实大致过程大差不差。
  • 2. 由于我这个屌丝没钱买服务器,所以只能利用coding.net进行托管,在百度蜘蛛爬取的时候,解析到coding pages
  • 有人说使用Git cafe,偷偷告诉你,git cafe已经被coding给买了,所以,老老实实用coding
  • 下面开始放大招

首先第一步,需要在Github上新建一个项目,这个问题应该不大吧,既然都用Github Pages了,这一步就不重复赘述了。

其次第二步,在coding.net中从Github导入项目

导入项目

第三步,开启codingpages服务,codingpages服务跟Githubpages服务的区别在于:coding使用的分支是mastercoding-pages,Github使用的分支是mastergh-pages,为了统一,建议使用master分支。

设置分支

PS:coding的坑:

  1. 分支跟github不一样
  2. 自定义域名需要银牌会员以上才能开启,银牌会员需要完善自己的账号资料即可开启(注意:不管是不是必填都要填才可以开启银牌会员)
  3. 使用coding的自定义域名,有一个问题,金牌及以上会员可以略过,如果是银牌会员,coding会先定向到一个coding提供的页面,之后才会重定向到你的自定义域名,除非。。。
    除非你在底部加上Hosted by coding pages

第四步,针对gitpush添加多个源

git remote set-url --add --push origin ****

****分别换成你自己对应的Github以及coding的项目地址
之后,使用git push origin master就可以将本地更改同步提交至Githubcoding

至此,镜像网站部分应该都已经搞定了,如有遗漏,自己研究研究吧。嗯哼~

第五步,通过DNSPod对域名进行解析

添加CNAME解析,针对百度解析值pages.coding.me,其余的解析到github.io
可能有人要问,为啥不直接用coding pages呢?鉴于服务稳定性以及Github挺给力的cdn加速,暂时没有这方面的打算。

添加域名解析

之所以采用这个方案,也是对比了一下,觉得这个比较靠谱,说说我的比较过程吧

  1. 利用阿里云进行域名解析,不过针对百度的解析,好像支持的并不好,所以放弃了
  2. 七牛云等cdn加速,由于域名未备案,所以直接就pass
  3. 百度云免费cdn加速,效果也不太好,缓存设置略微有点坑爹,放弃,不挣扎了。

不知道有没有人懂这种心情,都快哭了。好了,就这样吧,观察几天看看有没有问题,没问题的话,此贴就可以终结了,如果还有问题,那估计过几天你们就看不到这张帖子了。笑哭。。。。🤣


百度抓取

本文首发于Yuri博客

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 202,802评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,109评论 2 379
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 149,683评论 0 335
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,458评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,452评论 5 364
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,505评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,901评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,550评论 0 256
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,763评论 1 296
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,556评论 2 319
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,629评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,330评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,898评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,897评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,140评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,807评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,339评论 2 342

推荐阅读更多精彩内容