好久没有用过scrapy框架，甚至有一些手生了。学习东西最痛苦的事情是，学了的东西不用。过一段时间我都怀疑自己是否学过了。 还是古话说的好，温故...

头一段时间做了某网站的滑动验证码， 用的是阿里的滑动验证码。用自动化模拟滑块的拖动， 然而尝试了多种方法， 仍没能成功。最终得出结论，阿里的反爬...

疑难杂项 这篇的文章没有归类，也不太好归类。 在爬虫中经常用到的问题点。 比如说编码问题， 编码问题在Python中简直就是一门玄学， 在爬虫中...

execjs 使用 1. 安装 2. 简单使用 需要注意的是： 个别的JS语句， 用execjs返回的结果跟浏览器环境返回的结果是有区别的， 以...

Chrome Headless使用 Chrome的安装与配置不在此赘述， 不过需要注意的是： 版本号与驱动的映射关系！ 版本号与驱动的映射关系！...

xpath 高级用法 1. 匹配当前节点下的所有： .// 2. 匹配某标签的属性值： /@属性名称 3. 匹配多个路径：| 4.按属性匹配：@...