公众号搜索

前言

平时喜欢在公众号中看一些文章,虽然微信中能直接搜索文章,但是如果想看某个公众号的系列文章,需要关注公众号,这样就会导致关注的公众号越来越多了。偶然发现一个网站可以直接搜索微信公众号(网站地址
)在pc端浏览或者使用手机浏览器阅读都不是很方便,所以就自己打算实现一个搜索公众号的应用,目前实现了公众号的搜索,公众号文章浏览,无需关注。后续还会增加分类,收藏,推荐等。下面先看一下运行效果图。

运行效果图

获取数据

由于没有专用的接口,所以数据直接爬取上述提到的网站,工具使用Jsoup,这里不再讲述Jsoup的使用,很容易上手的,下面直接贴出教程的地址

jsoup官方文档
https://jsoup.org/cookbook/
中文文档
http://www.open-open.com/jsoup/

下面详细说一下数据的爬取过程

我们需要获取公众号的头像,名字,功能介绍,认证等信息,我们就需要找到对应的Html标签,以及选择器的名字,因为我们搜索出来的是一些公众号,所以在html中肯定是以列表展示的,我们直接查看代码找到对应的列表


在hmtl中列表是以类选择器为“new-list2”的ul来展示的,所以每一个公众号的信息是由li标签来展示的,所以直接看一下li标签的结构



通过分析li标签中的结构我们可以发现每一个我们需要的信息对应的标签名字和对应的选择器的名字,我们通过jsoup这个库直接获取我们所需要的信息就可以了,每个公众号都具有相同的结构,所以我们在代码中循环遍历ul标签然后获取每一个li标签内的信息即可。下面是爬取数据的具体代码:

@Override
public void run() {
    try {
        isRun = true;
        datas = new ArrayList<>();
        Document doc = Jsoup.connect(urlStr).get();
        Element ulElem = doc.select("ul.news-list2").first();
        Elements liElems = ulElem.select("li");
        for (int i = 0; i < liElems.size(); i++) {
            Element element = liElems.get(i);//每一项的li标签
            Elements divImg = element.select("div.img-box");
            String itemUrl = divImg.select("a[href]").attr("href");//item跳转链接
            String imgUrl = divImg.select("img").attr("src");//头像地址
            Elements divText = element.select("div.txt-box");
            String account = divText.select("label").text();//微信账号
            String count = divText.select("span").text();//月发文数量
            Elements dls = element.select("dl");
            Elements aElm = divText.select("a");
            String name = aElm.text();
            String article = "";
            String articleUrl = "";
            String function = "";
            String authentication = "";
            ArrayList<String> strs = new ArrayList<>();
            for (int i1 = 0; i1 < dls.size(); i1++) {
                Element dl = dls.get(i1);
                if (i1 == dls.size() - 1) {
                    Elements aEml = dl.select("dd").select("a");
                    article = aEml.text();
                    articleUrl = aEml.attr("href");
                    break;
                }
                strs.add(dl.select("dd").text());
            }
            if (strs.size() == 2) {
                function = strs.get(0);
                authentication = strs.get(1);
            }
 ItemBean itemBean = new ItemBean(itemUrl, saveFile.getAbsolutePath(), name, account, count, function,
                    authentication, article, articleUrl);//将数据封装到bean对象中
            datas.add(itemBean);
    } catch (Exception e) {
        e.printStackTrace();
    }
}

通过日志打印的信息我们看到,我们正确的获取了所需要的数据


日志信息

拿到数据后我们就可以将数据以列表的形式展示到页面上了,由于爬取数据中公众号头像地址中有的没有图片格式后缀名,那么在Android中使用图片工具类展示图片是不成功的,所以还是使用jsoup在爬取数据的过程中先把头像图片下载下来保存在本地,然后将图片的保存地址添加到bean对象中,在再去设置头像的时候,直接从本地读取。

//下载头像图片
Connection.Response response = Jsoup.connect(imgUrl).timeout(10 * 1000).ignoreContentType(true).execute();
File saveFile = new File(App.context.getCacheDir().getPath() + "/" + Md5Utils.md5(imgUrl) + ".jpg");
if(!saveFile.exists())saveFile.createNewFile();
BufferedOutputStream bos = new BufferedOutputStream(new FileOutputStream(saveFile));
bos.write(response.bodyAsBytes());
bos.flush();
bos.close();

展示数据

item的布局

<?xml version="1.0" encoding="utf-8"?>
<android.support.v7.widget.CardView xmlns:android="http://schemas.android.com/apk/res/android"
xmlns:card_view="http://schemas.android.com/apk/res-auto"
android:layout_width="match_parent"
android:layout_height="wrap_content"
android:layout_marginTop="6dp"
android:layout_marginRight="6dp"
android:layout_marginLeft="6dp"
card_view:cardBackgroundColor="@color/item_card_bg"
card_view:cardCornerRadius="1dp">

<LinearLayout
    android:layout_width="match_parent"
    android:layout_height="wrap_content"
    android:layout_margin="6dp"
    android:orientation="vertical">

    <LinearLayout
        android:layout_width="match_parent"
        android:layout_height="wrap_content"
        android:gravity="center_vertical"
        android:orientation="horizontal">

        <RelativeLayout
            android:layout_width="wrap_content"
            android:layout_height="wrap_content">

            <TextView
                android:layout_width="wrap_content"
                android:layout_height="wrap_content"
                android:text="功能介绍"
                android:textColor="#8e8c8c"
                android:textSize="16sp"
                android:visibility="invisible"/>

            <com.wx.ovalimageview.RoundImageView
                android:id="@+id/img_item"
                android:layout_width="55dp"
                android:layout_height="55dp"
                android:layout_centerInParent="true"
                android:scaleType="fitCenter"
                card_view:circle="true"/>

        </RelativeLayout>

        <RelativeLayout
            android:layout_width="0dp"
            android:layout_height="wrap_content"
            android:layout_weight="1">

            <TextView
                android:id="@+id/tv_left"
                android:layout_width="wrap_content"
                android:layout_height="wrap_content"
                android:text=":"
                android:textColor="#8e8c8c"
                android:textSize="16sp"
                android:visibility="invisible"/>

            <TextView
                android:id="@+id/tv_name"
                android:layout_width="wrap_content"
                android:layout_height="wrap_content"
                android:layout_toRightOf="@+id/tv_left"
                android:textColor="@color/item_name_text"
                android:textSize="18sp" />

            <TextView
                android:id="@+id/tv_item"
                android:layout_width="wrap_content"
                android:layout_height="wrap_content"
                android:layout_below="@+id/tv_name"
                android:layout_marginTop="4dp"
                android:text="微信号:"
                android:layout_toRightOf="@+id/tv_left"
                android:textColor="@color/item_info_text"
                android:textSize="16sp" />

            <TextView
                android:id="@+id/tv_acount"
                android:layout_width="wrap_content"
                android:layout_height="wrap_content"
                android:layout_alignBaseline="@+id/tv_item"
                android:layout_toRightOf="@+id/tv_item"
                android:textColor="@color/item_info_text"
                android:textSize="16sp" />

            <TextView
                android:id="@+id/tv_count"
                android:layout_width="wrap_content"
                android:layout_height="wrap_content"
                android:layout_alignBaseline="@+id/tv_item"
                android:layout_alignParentRight="true"
                android:layout_marginRight="10dp"
                android:textColor="@color/item_info_text"
                android:textSize="16sp" />
        </RelativeLayout>
    </LinearLayout>

    <LinearLayout
        android:id="@+id/llay_fun"
        android:layout_width="match_parent"
        android:layout_height="wrap_content"
        android:layout_marginTop="6dp"
        android:gravity="center_vertical"
        android:orientation="horizontal">

        <TextView
            android:layout_width="wrap_content"
            android:layout_height="wrap_content"
            android:text="功能介绍:"
            android:textColor="@color/item_info_text"
            android:textSize="16sp" />

        <TextView
            android:id="@+id/tv_func"
            android:layout_width="wrap_content"
            android:layout_height="wrap_content"
            android:ellipsize="end"
            android:maxLines="1"
            android:textColor="@color/item_fun_text"
            android:textSize="16sp" />
    </LinearLayout>

    <LinearLayout
        android:id="@+id/llay_authen"
        android:layout_width="match_parent"
        android:layout_height="wrap_content"
        android:layout_marginTop="4dp"
        android:gravity="center_vertical"
        android:orientation="horizontal">

        <TextView
            android:layout_width="wrap_content"
            android:layout_height="wrap_content"
            android:text="微信认证:"
            android:textColor="@color/item_info_text"
            android:textSize="16sp" />

        <TextView
            android:id="@+id/tv_authentication"
            android:layout_width="wrap_content"
            android:layout_height="wrap_content"
            android:ellipsize="end"
            android:maxLines="1"
            android:textColor="@color/item_fun_text"
            android:textSize="16sp" />

    </LinearLayout>

    <RelativeLayout
        android:id="@+id/relay_article"
        android:layout_width="match_parent"
        android:layout_height="wrap_content"
        android:layout_marginTop="4dp">

        <TextView
            android:id="@+id/tv"
            android:layout_width="wrap_content"
            android:layout_height="wrap_content"
            android:text="最近文章:"
            android:textColor="@color/item_info_text"
            android:textSize="16sp" />

        <TextView
            android:id="@+id/tv_article"
            android:layout_width="wrap_content"
            android:layout_height="wrap_content"
            android:layout_toLeftOf="@+id/tv_time"
            android:layout_toRightOf="@+id/tv"
            android:ellipsize="end"
            android:maxLines="1"
            android:textColor="@color/item_fun_text"
            android:textSize="16sp" />

        <TextView
            android:id="@+id/tv_time"
            android:layout_width="wrap_content"
            android:layout_height="wrap_content"
            android:layout_alignParentRight="true"
            android:layout_centerVertical="true"
            android:textColor="@color/item_info_text"/>
    </RelativeLayout>
</LinearLayout>
</android.support.v7.widget.CardView>

在搜索相关的公众号时,搜索结果有很多,我们一次搜索只获取一页,然后通过上拉加载来获取下一页,直到最后一页数据。

private String url = " http://weixin.sogou.com/weixin?page=%d&query=%s";//数据请求地址

请求的接口就这一个,我们只需要将搜索框中输入的关键字替换掉第二个参数,然后查询第几页替换掉第一个参数即可。

urlStr = String.format(url, page, keyword);//请求时正真的请求地址

最后我们在跳转到公众号详情的时候,是用WebView加载一个网页。这里推荐一个WebView的库,它对WebView做了封装处理,使用简单,功能强大。

AgentWeb

最后

代码已经提交到github

代码地址

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,033评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,725评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,473评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,846评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,848评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,691评论 1 282
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,053评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,700评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,856评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,676评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,787评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,430评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,034评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,990评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,218评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,174评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,526评论 2 343

推荐阅读更多精彩内容

  • 内容提要:本文作者为大家分享了影响微信公众平台排名的十大规则,希望对我们的微信运营者有帮助,带来价值. 首先,谈谈...
    御天阅读 2,377评论 4 8
  • 自从开设了微信搜索,微信公众号的搜索排名就成了每个公众号运营者所关心的,但是微信的规则有点难以琢磨,而且还在不断变...
    草莓de花阅读 2,516评论 0 0
  • 在公益项目道仙元的现场,娄宇先生用口书给大家献上了墨宝。正常人使用毛笔都需要数十年的练习。而娄宇老师需要用头部,颈...
    虎鲸骑士阅读 1,506评论 0 0
  • 那天和一个70多岁的老教师一起锻炼,我们突然提到一个貌似久远的历史名词——“征粮”。 可是,在N年以前,“征粮”留...
    西瓜甜甜啦阅读 3,399评论 103 46
  • 你要来到东北, 一定要做到心中有数。 这里的冰雪值得你来, 但你要预备好御寒的衣物。 这里会教会你什么是滴水成冰,...
    琢玉书生阅读 333评论 6 1