hexo博客主动推送到百度,让百度快速收录

原文链接:https://www.bigademo.com/2017/04/02/hexo%E5%8D%9A%E5%AE%A2%E4%B8%BB%E5%8A%A8%E6%8E%A8%E9%80%81%E5%88%B0%E7%99%BE%E5%BA%A6%EF%BC%8C%E8%AE%A9%E7%99%BE%E5%BA%A6%E5%BF%AB%E9%80%9F%E6%94%B6%E5%BD%95/index.html

最近买了3年的服务器总是想折腾点东西。想起之前弄过百度收录的东西,闲来无事,又给自己的新博客折腾一波。

基础

这里是基于git的钩子完成的。当客户端向git的服务端push文件的时候,git服务端的钩子会自动执行。这个请查看配置hexo博客,让云服务器执行它计算处理的使命

分析

百度站长工具

百度站长提供了自动提交手动提交两种方式。这个我们肯定不用手动提交这个弱智的方式。

自动提交

自动提交分为三种方式自动主动推送(实时)自动推送sitemap三种方式。

主动推送(实时)

  • 及时发现:可以缩短百度爬虫发现您站点新链接的时间,使新发布的页面可以在第一时间被百度收录
  • 保护原创:对于网站的最新原创内容,使用主动推送功能可以快速通知到百度,使内容可以在转发之前被百度发现。
    主动推送提供了4种提交的方式,curl,post,php,ruby。这里以curl为例。
    我们将包含html地址的urls.txt文件提交到接口调用地址。我们的重点是怎么生成urls.txt

自动推送

正如官网所说的那样,将代码复制在html页面的head头里即可,这个自己看百度站长工具吧。

sitemap

sitemap是我们提交一个带有url地址的txt或者xml文件。我们这里也是提交urls.txt这个文件。同样重点也是生成这个文件。

生成urls.txt文件

我们知道在执行hexo g的命令后,会在public文件夹下生成Markdown文件对应的html文件,我们的思路先查找出这些html文件,然后放置在urls.txt这个文件里。

查找html文件

我们在post-receive这个文件里执行的都是shell命令,那么我们首先用shell命令查找这些html文件的路径。这个就用到了grep这个命令。grep语法参考linux grep命令详解
在public的文件夹下,执行下面的命令

grep -r -l 'index.html' * >>1.txt
>>是将查询的记录添加到1.txt中。

上面的命令生成的路径没有带域名,我们需要使用sed这个命令,在每个路径上添加域名生成urls.txt。

生成urls.txt文件

sed的语法参考sed 字符串替换。我们使用下面的命令在每个路径前面添加域名。

sed 's/^/添加的头部&/g'      #在所有行首添加

注意这里的 " & " 符号,如果没有 “&”,就会直接将匹配到的字符串替换掉
那么就讲上面的添加的头部改为我们的域名,这个需要注意的是域名中的"/需要用"/"替换。

sed 's/^/http:\/\/www.demo.com\/&/g' 1.txt  >>urls.txt

上面的代码是将1.txt里的路径都在开头添加上域名,并把新路径放在urls.txt文件里。

主动推送

处理完上面的两步,我们就有了urls.txt的文件,我们就可以执行curl的代码了。

最后

最后放出我的钩子代码

#!/bin/bash -l
GIT_REPO=/home/git/blog/hexo.git
PUBLIC_WWW=/home/git/blog/hexo
rm -rf ${PUBLIC_WWW}
git clone $GIT_REPO $PUBLIC_WWW
cd $PUBLIC_WWW
hexo clean && hexo g
echo "-------------------"
cd $PUBLIC_WWW/public/
grep -r -l 'index.html' * >> 1.txt
sed 's/^/http:\/\/www.bigademo.com\/&/g' 1.txt  >>urls.txt
rm 1.txt
curl -H 'Content-Type:text/plain' --data-binary @urls.txt "http://data.zz.baidu.com/urls?site=www.demo.com&token=******"
echo "--------------------"
cd $PUBLIC_WWW
pm2 delete all
pm2 start app.js
if [[ $? == 0 ]]
then
    echo "------------------------------------------------------"
    echo "Congratulations! Your blog has been correctly deployed"
    echo "------------------------------------------------------"
else
    echo "......................................................."
    echo "Unfortunately your blog has not been deployed correctly"
    echo "......................................................."
fi
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 202,723评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,080评论 2 379
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 149,604评论 0 335
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,440评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,431评论 5 364
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,499评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,893评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,541评论 0 256
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,751评论 1 296
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,547评论 2 319
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,619评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,320评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,890评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,896评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,137评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,796评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,335评论 2 342

推荐阅读更多精彩内容