发简信
IP属地：广东
-
爬虫控制器
JOB-STOP
-
mysql优化
索引优化总结。 前言 下诉情况中如果没有特别说明，都是默认都是索引都是指复合索引，查看索引长度 EXPLAIN + SQL语句结果 key_le...
-
Google 被挟持 解决方案
Google 浏览器被挟持，各种百度各种杀毒软件都没用，对这些网站恶心的要死，看到就想终身拉黑。在经过一番摸索发现，只要把原来的谷歌浏览器复制一...
-
淘宝 爬虫前言 工作原因之前接触过爬虫这块技术，因为爬虫身为Java工程师的我不止学习了python，还入了易语言的坑。在网上看到各类爬虫示例虽然都是比较...
-
Spark JDBC 自定义方言
前言 在大数据开发中，少不了有对各种数据库的读写。经常会出现一些字段类型与数据库期望不一致报错。Spark 默认的方言对象都存放在org.apa...
-
Java 无头浏览器 暴破网站登录
登录获取token 可以说是爬虫里面最难的点，其他的只要能在浏览器上显示的都可以用http工具获取。只要稍微有点安全意识的网站登录都比较复杂，J...
-
Linux 指令
cd 打开目录 tail -1000 xxx.log 打开文件 倒数1000行 并卡出 tail -1000f store-service-in...
-
Linux SSH
ssh-keygen -t rsacp id_rsa.pub authorized_keys 拷贝 id_pub 文件到对应目录下 本地公钥拷...
-
Spark 保存数据到MongoDB背景交代 由于我们应用系统使用的是mongo,所以每次操作结果都要输出到MongoDB方便使用 。 思路 1、遇到这样的情景我第一时间打开Spa...