day40-MongoDB、crontab

1、MongoDB安装

    见文档, MongoDB监听端口为27017
    链接本机:mongo 
    链接其他机器:mongo ip:27017

1、windows
    安装MongoDB
        官网下载msi安装包
        https://www.mongodb.com/dr/fastdl.mongodb.org/win32/mongodb-win32-x86_64-2008plus-3.4.10-signed.msi/download
        安装,一路next即可
    新建文件夹
        c:\data\db     数据库存放目录
        c:\data\log    日志存放目录
    启动服务
        mongod.exe --dbpath c:\data\db
        启动成功,默认MongoDB监听的端口是27017
        【注】如果是默认安装路径,路径需要用引号括起来才行
        【注】或者将data文件夹放到c盘或者d盘根目录下
        【注】用管理员命令行,并且有空格的用双引号引起来即可
    启动客户端
        mongo.exe
        连接成功进入,默认  127.0.0.1:27017
    添加环境变量
        将MongoDB\Server\3.4\bin 添加到环境变量中
    将MongoDB设置为windows服务
        在终端下输入:
        mongod --dbpath "c:\data\db" --logpath "c:\data\log\MongoDB.log" --install --serviceName "MongoDB"
        启动服务  net start MongoDB
        关闭服务  net stop MongoDB
    卸载windows服务MongoDB
        mongod --dbpath "c:\data\db" --logpath "c:\data\log\MongoDB.log" --remove --serviceName "MongoDB"
2、centos
    (1)cd /etc/yum.repos.d/
    (2)vi mongodb-org.repo
        [mongodb]
        name=MongoDB Repository
        baseurl=http://downloads-distro.mongodb.org/repo/redhat/os/x86_64/
        gpgcheck=0
        enabled=1
    (3)yum install -y mongodb-org (需要网络)
    (4)启动MongoDB
        service mongod start
    (5)配置远程机器可以访问
        vi /etc/mongod.conf
        将  bind 127.0.0.1  这一行注释掉即可
        关闭防火墙和selinux
        service iptables stop
        setenforce 0
    (6)远程连接
        mongo 192.168.1.104:27017
3、Ubuntu
    (1)sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --recv 9DA31620334BD75D9DCB49F368818C72E52529D4
    (2)echo "deb [ arch=amd64,arm64 ] https://repo.mongodb.org/apt/ubuntu xenial/mongodb-org/4.0 multiverse" | sudo tee /etc/apt/sources.list.d/mongodb-org-4.0.list
    【注】仅仅是针对于Ubuntu16.04
    (3)sudo apt-get update
    (4)sudo apt-get install -y mongodb-org
    查看服务是否启动
    pgrep mongo -l

    #查看版本
    mongo -version

    手动启动
    sudo service mongod start | stop | restart  


2、MongoDB指令操作

    和mysql的对应关系
    mysql       MongoDB
    数据库      数据库
    数据表      集合(collection)
    一行数据    文档(document)  字典
    字段        键

一、操作mongodb数据库
    1、创建数据库
        语法:use 数据库名
        注意:如果数据库不存在则创建数据库,否则切换到指定的数据库
        注意:如果刚刚创建的数据库不在列表内,如果要显示它,我们需要向刚刚创建的数据库中插入一些数据
        (   db.star.insert({name:"tom", age:18, gender:1,address:"北京", isDelete:0})   )
    2、删除数据库
        前提:使用当前数据库(use 数据库名)
        db.dropDatabase()
    3、查看所有数据库
        show dbs
    4、查看当前正在使用的数据库
        a、db
        b、db.getName()
    5、断开连接
        exit
    6、查看命令api
        help

二、集合操作
    1、查看当前数据库下有哪些集合
        show collections
    2、创建集合
        a、
            语法:db.createCollection("集合名")
            示例:db.createCollection("class")
        b、
            语法:db.集合名.insert(文档)
            示例:db.student.insert({name:"tom", age:18, gender:1,address:"北京", isDelete:0})

        区别:两者的区别在于前者创建的是一个空的集合,后者创建一个空的集合并添加一个文档

    3、删除当前数据库中的集合
        语法:db.集合名.drop()
        示例:db.class.drop()
【注】MongoDB中添加数据,字段可以不一样
三、文档操作
    1、插入文档
        a、使用insert()方法插入文档
            语法:db.集合名.insert(文档)
                插入一个:db.student.insert({name:"刘欢", age:19,address:"北京", isDelete:0})
            语法:db.集合名.insert([文档1, 文档2, ……, 文档n])
                插入多个:db.student.insert([{name:"马德华", age:17,address:"北京", isDelete:0},{name:"凤凰女", age:20,address:"上海", isDelete:0}])
        b、使用save()方法插入文档
            语法:db.集合名.save(文档)
                说明:如果不指定_id字段,save()方法类似于insert()方法。如果指定_id字段,则会更新_id字段的数据
            示例1:db.student.save({name:"科比", age:22,address:"洛杉矶", isDelete:0})
            示例2:db.student.save({_id:ObjectId("59950962019723fe2a0d8d17"),name:"姚明", age:23,address:"休斯顿", isDelete:0})
            如果id存在,更新数据,不存在添加数据
    2、文档更新
        a、update()方法用于更新已存在的文档
        语法:
            db.集合名.update(
                query,     # 查询条件
                update,    # 更新什么
                {          # 附加功能
                    upsert:<boolean>,
                    multi:<boolean>
                }
            )
        参数说明:
            query:update的查询条件,类似于sql里update语句内where后面的内容
            update:update的对象和一些更新的操作符($set,$inc)等,$set直接更新,$inc在原有的基础上累加后更新
            upsert:可选,如果不存在update的记录,是否当新数据插入,true为插入,False为不插入,默认为false
            multi:可选,mongodb默认是false,只更新找到的第一条记录,如果这个参数为true,就按照条件查找出来的数据全部更新

        需求:将刘德华的年龄更新为25
        示例:
              db.student.update({name:"刘德华"},{$set:{age:25}})
              累加:db.student.update({name:"刘德华"},{$inc:{age:25}})  
              全改:db.student.update({name:"刘德华"},{$set:{age:42}},{multi:true})  

        b、save()方法通过传入的文档替换已有文档
            必须有_id这个键才是更新
            语法:
                db.集合名.save(
                    document
                )
            参数说明:
                document:文档数据

    3、文档删除
        说明:在执行remove()函数前,先执行find()命令来判断执行的条件是否存在是一个良好习惯
        也可以使用查询中的and和or
        语法:
            db.集合名.remove(
                query,
                {
                    justOne:<boolean>
                }
            )
        参数说明:
            query:可选,删除的文档的条件
            justOne:可选,如果为true或1,则只删除一个文档

        示例:db.student.remove({name:"刘德华"})

    4、文档查询
        a、find()方法
            语法:db.集合名.find()
            查询集合下所有的文档(数据):db.student.find()
        b、find()方法查询指定列
            语法:db.集合名.find(
                query,
                {
                    <key>:1,
                    <key>:1
                }
            )
            参数说明:
                query:查询条件
                key:要显示的字段,1表示显示
        示例:
            查询指定条件,只显示name和age
              db.student.find({isDelete:0},{name:1,age:1})
            查询所有只显示name和age键值
              db.student.find({},{name:1,age:1}) 

        c、pretty()方法以格式化方式来显示文档
            示例:db.student.find().pretty()
            其实就是字典形式显示

        d、findOne()方法查询匹配结果的第一条数据
            示例:db.student.findOne({isDelete:0})
    5、查询条件操作符
        作用:条件操作符用于比较两个表达式并从Mongodb集合中获取数据
        a、大于 - $gt   greater than
            语法:db.集合名.find({<key>:{$gt:<value>}})
            示例:db.student.find({age:{$gt:20}})
        b、大于等于 - $gte  equal
            语法:db.集合名.find({<key>:{$gte:<value>}})
        c、小于 - $lt   less than
            语法:db.集合名.find({<key>:{$lt:<value>}})
        d、小于等于 - $lte
            语法:db.集合名.find({<key>:{$lte:<value>}})
        e、大于等于 和 小于等于 - $gte 和 $lte
            语法:db.集合名.find({<key>:{$gte:<value>,$lte:<value>}})
        f、等于 - :
            语法:db.集合名.find({<key>:<value>})
        g、使用_id进行查询
            语法:db.student.find({"_id":ObjectId("id值")})
            示例:db.student.find({"_id":ObjectId("5995084b019723fe2a0d8d14")})
        h、查询某个结果集的数据条数
            db.student.find().count()
        i、查询某个字段的值当中是否包含另一个值
            语法:
            示例:db.student.find({name:/love/}) 包含love
        j、查询某个字段的值是否以另一个值开头
            示例:db.student.find({name:/^li/}) 开头
            示例:db.student.find({name:/li$/}) 结尾
    6、条件查询and 和 or
        a、AND条件
            语法:db.集合名.find({条件1,条件2,……,条件n})
            示例:db.student.find({isDelete:0,age:{$gt:16}})
        b、OR条件
            语法:
                db.集合名.find(
                    {
                        $or:[{条件1},{条件2},……,{条件n}]
                    }
                )
            示例:db.student.find({$or:[{age:17},{age:{$gte:20}}]})
        c、AND和OR联合使用
            语法:
                db.集合名.find(
                    {
                        条件1,
                        条件2,
                        $or:[{条件3},{条件4}]
                    }
                )
                sex是女
                age>30
                height=160 or height=158
            db.star.find({sex:'女',age:{$gt:30},$or:[{height:160},{height:158}]})
    7、limit、skip
        limit 偏移量,数量   20条数据,每页显示4条
        a、limit():读取指定数量的数据记录
            db.student.find().limit(3)
        b、skip():跳过指定数量的数据
            db.student.find().skip(3)
        c、skip与limit联合使用
            通常用这种方式来实现分页功能
            示例:db.student.find().skip(3).limit(3)
            20条数据,每页显示4条,直接得到第三页所有数据
            db.star.find().skip((3-1)*4).limit(4)
    8、排序
        语法:db.集合名.find().sort({<key>:1|-1})
        示例:db.student.find().sort({age:1})
        注意:1表示升序,-1表示降序

        db.star.find({sex:'女'}).sort({age:1,height:-1})
        先按照年龄升序排列,然后按照身高降序排列

3、MongoDB代码操作

一、导入 pymongo
    pip install pymongo
    from pymongo import MongoClient
二、连接服务器 
    端口号 27017
    连接MongoDB
    连接MongoDB我们需要使用PyMongo库里面的MongoClient,一般来说传入MongoDB的IP及端口即可,第一个参数为地址host,第二个参数为端口port,端口如果不传默认是27017。
    conn = MongoClient("localhost")
    MongoClient(host='127.0.0.1',port=27017)
三、连接数据库
    db = conn.数据库名称
    连接集合
    collection = db[collection_name]
    or
    collection = db.collection_name
    查看全部集合名称
    db.collection_names()

四、插入数据
    (1) 插入一条数据
        db.user.insert({"name":"小刚","age":18,"hobby":"学习"})
    (2) 插入多条数据
        db.user.insert([{"name":"小刚","age":18,"hobby":"学习"},{"name":"xxxoo","age":48,"hobby":"学习"}]
    (3) 在3.x以上 建议 使用
        insert_one 插入一条数据
        insert_many() 插入多条数据
    (4) 返回 id  使用insert_one()或者insert_many()
        ret.inserted_id
        ret.inserted_ids   得到其  _id

五、查询数据
    (1) 查询所有
        db.user.find()
        带条件的查询
        data = db.user.find({"name":"周日"})
        print(data) #返回result类似一个生成器  可以使用 next方法 一个一个 的取出来
        print(next(data))   #取出一条数据
    (2) 查询一条
        db.user.find_one()
    (3) 带条件查询
        db.user.find({"name":"张三"})
    (4) 查询 id
        from bson.objectid import ObjectId* #用于ID查询
        data = db.user.find({"_id":ObjectId("59a2d304b961661b209f8da1")})
    (5) 模糊查询
        (1){"name":{'$regex':"张"}}
        (2)import re    {'xxx':re.compile('xxx')}
    (6) sort        排序
        年龄 大于10
        data = db.user.find({"age":{"$gt":10}}).sort("age",1) #年龄 升序 查询  pymongo.ASCENDING   --升序
        data = db.user.find({"age":{"$gt":10}}).sort("age",-1) #年龄 降序 查询    pymongo.DESCENDING --降序
    (7) limit       取值
        取三条数据
        db.user.find().limit(3)
        data = db.user.find({"age":{"$gt":10}}).sort("age",-1).limit(3)
    (8) count   统计数据条数
        db.user.find().count()
    (9) skip        从第几条数据开始取
        db.user.find().skip(2)
七、修改
    update()方法其实也是官方不推荐使用的方法,在这里也分了update_one()方法和update_many()方法,用法更加严格,
    (1) update()
        db.user.update({"name":"张三"},{"$set":{"age":25}})
        db.user.update({"name":"张三"},{"$inc":{"age":25}})
    (2) update_one() 第一条符合条件的数据进行更新
        db.user.update_one({"name":"张三"},{"$set":{"age":99}})
    (3) update_many() 将所有符合条件的数据都更新
        db.user.update_many({"name":"张三"},{"$set":{"age":91}})
    (4) 返回结果是UpdateResult类型
        然后调用matched_count和modified_count属性分别可以获得匹配的数据条数和影响的数据条数
        print(result.matched_count, result.modified_count)

八、删除
    删除操作比较简单,直接调用remove()方法指定删除的条件即可,符合条件的所有数据均会被删除,
    (1) 删除 张三
        collection.remove({"name":"lilei"})
    (2) 全部删除
        collection.remove()
    (3) 依然存在两个新的推荐方法
        delete_one()和delete_many()方法,示例如下:
        delete_one()即删除第一条符合条件的数据
        collection.delete_one({“name”:“ Kevin”})
        delete_many()即删除所有符合条件的数据,返回结果是DeleteResult类型
        collection.delete_many({“age”: {'$lt':25}})
    (4) 可以调用deleted_count属性获取删除的数据条数。
        result.deleted_count

九、关闭连接
    conn.close()

crontab

crontab 详解
计划任务
场景:
    要求你每天晚上备份一下你的数据库,凌晨4点
    每隔一分钟抓取一次你竞争对手的网站,建立情报
    
1、crontab -e   
    给当前用户添加调度任务
    新建任务调度指令
    编写脚本   /out.sh  
        #!/bash/sh
        cd /
        ls -l > /1.txt
    编写任务脚本定时执行这个shell脚本
    
    crontab文件的格式:M H D m d cmd
    分钟:0-59  每分钟使用*  或者 */1
    小时:0-23
    日期:1-31
    月份:1-12
    星期:0-6   0表示星期天
    #分钟 小时  日期  月份  星期  指令
      17    12      9       4       6       /out.sh  4月9号12点17并且是星期六执行指令
      43    21      *       *       *                每天的21:43执行指令
      0     17      *       *       1                每周一的17点执行指令
      4     4       1       *       *                每月1号4:4执行指令
      0     21      *       *       1-6              周一到周六每天21:00执行指令
      2     8-20/3  *       *       *                8:02/11:02/14:02/17:02/20:02 执行
      30    5       1,5     *       *                每月1号和5号的5:30执行
      */1   *       *       *       *                每分钟执行
      
2、crontab -l   查看当前用户所有的任务调度指令
3、crontab -r   删除当前用户所有任务调度指令
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,547评论 6 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,399评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,428评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,599评论 1 274
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,612评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,577评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,941评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,603评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,852评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,605评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,693评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,375评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,955评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,936评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,172评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,970评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,414评论 2 342

推荐阅读更多精彩内容

  • 关于Mongodb的全面总结 MongoDB的内部构造《MongoDB The Definitive Guide》...
    中v中阅读 31,894评论 2 89
  • Linux习惯问题: 在vim编辑时,按了ctrl + s后,再按ctrl + q就可以继续执行了。ctrl + ...
    光着脚的鞋阅读 4,480评论 0 16
  • 1.安装cron yum install vixie-cron yum install crontabs vixi...
    Broom阅读 1,232评论 0 1
  • 当儿子在事业上取得成绩时,作为父亲的傅雷当然是高兴的,但并没有沉浸在那份成就里,而是希望儿子在取得巨大成功、被...
    李忠宸阅读 841评论 2 2
  • 我们是来自成都青白江华严小学思齐悦读派的同学们,今天我们在一起共读第89天
    紫冰_c832阅读 160评论 0 1