2019-07-30

1. 筛选三国云词中的人物名字TOP15

import jieba
from wordcloud import WordCloud

#1.读取小说内容
with open('./novel/threekingdom.txt','r', encoding='utf-8') as f:
    words = f.read()

    counts = {} #{'name':出现次数,'name':出现

    #2. 分词
    words_list = jieba.lcut(words)
    print(words_list)
    for word in words_list:
        if len(word) <= 1:
            continue
        else:
            # 更新字典中的值
            # counts[word] = 取出字典中原来键对应的值 + 1
            # counts[word] = counts[word] + 1  # counts[word]如果没有就要报错
            # 字典。get(k) 如果字典中没有这个键 返回 NONE
            counts[word] = counts.get(word, 0)+1


    print(counts)

    #3.词语过滤,删除无关词,重复词
    #排除前15中不是人物名字的词语
    excludes={"将军","却说","丞相","二人","不可","荆州","孔明曰","不能","玄德曰","如此","商议","如何","主公","军士","军马",
              "左右","次日","引兵","大喜","天下","东吴","于是","今日","不敢","魏兵",
              "陛下","都督","人马","不知","汉中","一人","只见","众将",
              "后主", "大叫", "上马", "此人", "先主", "太守","天子",
              }

    counts['孔明'] = counts['孔明'] + counts['孔明曰']
    counts['玄德'] = counts['玄德'] + counts['玄德曰'] + counts['刘备']
    counts['关公'] = counts['关公'] + counts['云长']
    for word in excludes:
        del counts[word]

    #4.排序[(), ()]
    items = list(counts.items())
    print(items)

    def sort_by_count(x):
        return x[1]
    items.sort(key=sort_by_count, reverse=True)


    #取前15
    li = []  # ['孔明', 孔明, 孔明,孔明...., '曹操'。。。。。]
    for i in range(14):
        #序列解包
        role, count = items[i]
        print(role, count)
        # _ 是告诉看代码的人,循环里面不需要使用临时变量
        for _ in range(count):
            li.append(role)

    #5.得出结论
    text = ' '.join(li)
    WordCloud(
        font_path='msyh.ttc',
        background_color='white',
        width=800,
        height=600,
        # 相邻两个重复词之间的匹配
        collocations=False
    ).generate(text).to_file('TOP15.png')
TOP15.png

2. lambda表达式

lambda表达式,通常是不想费神去命名一个函数,并且这个函数只使用一次的场合下使用,也就是指匿名函数。一个lambda表达式的参数可以是无限多个。

  • 运用示例
#示例1:使用lambda实现加法运算
sum_num = lambda x1,x2 : x1+x2
print(sum_num(2,3))

#示例2:使用lambda表达式为列表排序
name_info_list =[
    ("张三",4500),
    ("李四",6800),
    ("王五",3000),
    ("赵六",5000)
]
name_info_list.sort(key=lambda x:x[1],reverse=True)
print(name_info_list)

#示例3:使用lambda表达式为列表排序
stu_info =[
    {"name":"zhangsan", "age":18},
    {"name":"lisi", "age":30},
    {"name":"wangwu", "age":26},
    {"name":"zhaoliu", "age":19}
]
stu_info.sort(key=lambda i:i["age"])
print(stu_info)

3. Python推导式

推导式(又称解析式),是可以从一个数据序列构建另一个新的数据序列的结构体。

  • 列表推导式
    使用普通for循环生成列表和使用推导式生成列表的比较
# 创建列表
li = []
for i in range(10):
    li.append(i)
print(li)

print([i for i  in range(10)]) #使用推导式

# 筛选出列表中所有的偶数
li = []
for i in range(10):
    if i%2 == 0:
        li.append(i)
print(li)

print([i for i in range(10) if i%2 == 0]) #使用推导式
# 使用推导式筛选出列表中 大于0 的数
from random import randint
num_list = [randint(-10, 10) for _ in range(10)]
print(num_list)
print([i for i in num_list if i>0])
  • 字典推导式
# 生成100个学生的成绩
stu_grades = {'student{}'.format(i):randint(50, 100) for i in range(1, 101)}
print(stu_grades)

# 筛选大于 60分的所有学生
print({k: v for k, v in stu_grades.items() if v >60})
  • 集合推导式

集合推导式类似与列表推导式,区别在于{}。

squared = {x**2 for x in [1, 1, 2]}
print(squared)

4. 数据可视化展示

Matplotlib是 Python 的绘图库, 它可与 NumPy 一起使用。能够创建多数类型的图表,如曲线图,散点图,柱状图,饼图,堆叠图,3D 图和地图图表。

  • 曲线图
from matplotlib import pyplot as plt      #导入matplotlib包
import numpy as np

#设置rc参数显示中文标题
#设置字体为SimHei显示中文
plt.rcParams["font.sans-serif"] = ['SimHei']
#设置正常显示字符
plt.rcParams['axes.unicode_minus'] = False

#  使用100个点 绘制 [0 , 2π]正弦曲线图
#.linspace 左闭右闭区间的等差数列
x = np.linspace(0, 2*np.pi, num=100)
print(x)
y = np.sin(x)
#  正弦和余弦在同一坐标系下
cosy = np.cos(x)
plt.plot(x, y, color='g', linestyle='--',label='sin(x)')    #颜色:绿色;线条样式:虚线;绘制sin曲线
plt.plot(x, cosy, color='r',label='cos(x)')  #颜色:红色;绘制cos曲线
plt.xlabel('时间(s)')    #x轴单位
plt.ylabel('电压(V)')     #y轴单位
plt.title('欢迎来到python世界')    #标题
# 图例
plt.legend()
plt.show()
正弦、余弦曲线图
  • 柱状图
# 柱状图
import string
from random import randint
# print(string.ascii_uppercase[0:6])
# ['A', 'B', 'C'...]
x = ['口红{}'.format(x) for x in string.ascii_uppercase[:5] ]
y = [randint(200, 500) for _ in range(5)]
print(x)
print(y)
plt.xlabel('口红品牌')
plt.ylabel('价格(元)')
plt.bar(x, y)
plt.show()
条形图
  • 饼图
#饼图
from random import randint
import string
counts = [randint(3500, 9000) for _ in range(6)]
labels = ['员工{}'.format(x) for x in string.ascii_lowercase[:6] ]
# 距离圆心点距离
explode = [0.1,0,0, 0, 0,0]
colors = ['red', 'purple','blue', 'yellow','gray','green']
plt.pie(counts,explode = explode,shadow=True, labels=labels, autopct = '%1.1f%%',colors=colors)
plt.legend(loc=2)
plt.axis('equal')
plt.show()
饼图
  • 散点图
# 散点图
#均值为 0 标准差为1 的正太分布数据
x = np.random.normal(0, 1, 100)
y = np.random.normal(0, 1, 100)
# alpha透明度
plt.scatter(x, y, alpha=0.5)
plt.show()

透明度为0.5的散点图
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,362评论 5 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,330评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,247评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,560评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,580评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,569评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,929评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,587评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,840评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,596评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,678评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,366评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,945评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,929评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,165评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,271评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,403评论 2 342

推荐阅读更多精彩内容

  • 学习Python的第三天 三国TOP10人物分析 读取小说内容 分词 排序 词语过滤,删除无关词,重复词 得出结论...
    充话费送De阅读 182评论 0 0
  • 1.列表推导式 列表推导式书写形式: [表达式 for 变量 in 列表] 或者 [表达式 for 变量 in 列...
    凉水孤舟绿水大漠阅读 378评论 0 0
  • 动态图表的制作 E站到底第二十天,E站到底马上就接近尾声了,相信每个人的学习热情不会因为课程的结束而结束的! 首先...
    杨爱鑫阅读 240评论 0 0
  • vlookup 可视化、无限变化 辅助列:数据、数据有效性、允许:序列、来源:名字区域,名字就可以筛选 复制月份表...
    星语西瓜阅读 140评论 0 0
  • 当我写下这个标题的时候,我已经在白天和黑夜问了自己很多遍,生活的意义到底是什么?人有时候很奇怪,会在某些时候问自己...
    凌云志阅读 617评论 0 1