是阈值不是阀值!!! 阈的意思是界限,故阈值又叫临界值,是指一个效应能够产生的最低值或最高值。说了这么多年的阀值,这才知道应该是阈值,丢人丢大了!!!
week10总结:
1.自己搞了一个极为简陋的代理池:利用爬虫从西刺上爬取代理地址,并做一个简单的有效性验证,有效的地址存入mongoDB数据库。几点体会:一是利用pymongo可以实现对mongoDB的操作,很方便;二是免费代理网站的代理地址可用的太少,而且可靠性太差了;三是没有用多线程,也不是异步IO,效率极低。
2.接触了一点关于利用django开发web的知识。
week11任务:
1.利用爬取的代理地址,爬取一些网站数据。
2.优化代理池,或者直接从Github上找一个成熟的代理池。