a = []
#----------------------------------------------------------------------
def ceshi_url(url_file):
""""""
with open(url_file) as w:
urls = w.readlines()
for i in urls:
i = i.strip('\n').strip('\r')
try:
url = tld.get_tld(i)
list_url = 'http://' + url
a.append(list_url)
except Exception,e:
print str(e)
ceshi_url('formal_url.txt')
g = open('url.txt','w+')
a = list(set(a))
print len(a)
for i in a:
print i
g.writelines(i)
g.writelines('\n')
获取主站，并且去重
最后编辑于 ：
©著作权归作者所有,转载或内容合作请联系作者
- 文/潘晓璐 我一进店门，熙熙楼的掌柜王于贵愁眉苦脸地迎上来，“玉大人，你说我怎么就摊上这事。” “怎么了？”我有些...
- 文/花漫 我一把揭开白布。 她就那样静静地躺着，像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上，一...
- 文/苍兰香墨 我猛地睁开眼，长吁一口气：“原来是场噩梦啊……” “哼！你这毒妇竟也来了？” 一声冷哼从身侧响起，我...
推荐阅读更多精彩内容
- 1.当代种种事件不同于历史之处，在于我们不知道它们会产生什么后果。 2.经验和利益的偶然结合，往往会向人们揭示...
- 时间：2017-2-19（周日） 地点：海南省海口市 修习者小豆丁：小俊娟 1/我怎么如此幸运，观察1： 小俊娟今...
