html5播放rtsp方案

由于摄像头是rtsp格式的,h5原生不支持这种格式,网上查了很多教程大多是使用rtsp转rtmp,不过rtmp需要falsh的支持,但是在chrome已经默认禁用、包括未来也会逐渐淘汰,所有最终这种方案被淘汰。一种叫jsmpeg的插件,它主要是通过webSocket发送MPEG,前端通过js解析MPEG不断绘制canvas,包括音频。最终测试的结果就是一个1920*1080分辨率的画面延时大概的0.5s左右,性能蛮高的。

下面说一下怎么安装

准备工具

1 . Ffmpeg(点击下载),配置环境添加到path变量中

2 . Node.js(点击下载),配置环境添加到path变量中

3 . jsmpeg(点击下载),运行主程序

4 . 运行jsmpeg

解压jsmpeg压缩文件到某个盘符,里面出现有一个websocket-relay.js,我们主要运行这个js文件

在运行websocket-relay.js之前node需要安装webSocket模块

终端: npm install ws

运行jsmpeg文件夹里面的websocket-relay.js

终端: node websocket-relay.js supersecret 8081 8082

说明: Supersecret是密码 8081是ffmpeg推送端口8082是前端webSocket端口

运行解码程序

终端:ffmpeg -i "rtsp" -q 0 -f mpegts -codec:v mpeg1video -s 1366x768 http://127.0.0.1:8081/supersecret

上述方案目前还没有投入生产使用,想要真正投入使用至少要解决同时播放多个rtsp流的问题,官方提供websocket-relay.js只能播放一个源,所以需要重写里面的代码,学一下node.js吧,考虑到性能问题,最好在有GPU的客户端使用,否则性能会是一个瓶颈,网络带宽也是一个值得考虑的问题

       2019717日更新代码,因为之前有人问我怎么实现多个视频流同时播放的问题,这里我把代码提交上来了,先看一下代码里面的注释,说明之后补充,感谢,代码提交到这里了(https://gitee.com/yzfar/RtspWebSocket.git)

5 . 2019年8月19日多个摄像头播放的补充

之前我把播放多个摄像头的代码上传的码云上面了,今天我说一下怎么播放废话不多说,怎么用说一下

第一

其他步骤和上面的一致保证环境没得问题之后在cd到项目目录

然后执行: node websocket.js supersecret 8081 8082,我们主程序改为websocket.js了

第二

终端: ffmpeg "rtsp" -q 0 -f mpegts -codec:v mpeg1video -s 800x600 http://127.0.0.1:8081/supersecret/live1

再开一个cmd输入,这里测试:

终端:ffmpeg " rtsp" -q 0 -f mpegts -codec:v mpeg1video -s 800x600http://127.0.0.1:8081/supersecret/live2

这两不一样的就是最后的live1和live2了

第三

修改view-stream.html里面的代码如下

变化的就是var url = 'ws://127.0.0.1:8082/live';变化的就是live1和live2和第二步的相对应就像,双击打开view-stream.html呈现如下效果

这里补充一下,代码里面没有关闭视频流的功能,在日志打印关闭连接之后最好删除一下后台的ffmpeg流,不然会造成性能问题,这个关闭的代码在js里面不能体现出来,最好是在控制cmd命令的程序里面关闭一下。

ffmpeg具备gpu加速功能,本人未测试过,有兴趣的朋友可以尝试一下cuda方式。

第一条使用英特尔的CPU硬件加速,普通pc机cpu有效,服务器如至强处理器无效

ffmpeg -c:v h264_qsv -rtsp_transport tcp -i "rtsp" -q 0 -vcodec h264_qsv -f mpegts -codec:v mpeg1video -s 800x600http://127.0.0.1:8081/supersecret/live1

第二条使用cuda加速,需要gpu并安装cuda

ffmpeg -c:v h264_cuvid -rtsp_transport tcp -i "rtsp" -q 0 -vcodec h264_cuvid -f mpegts -codec:v mpeg1video -s 800x600http://127.0.0.1:8081/supersecret/live2

另外需要使用声音的采用如下命令

ffmpeg -i -i "rts" -f mpegts -codec:v mpeg1video -s 800x600 -codec:a mp2http://127.0.0.1:8081/supersecret/live2

基于webrtc播放的解决方案移步到https://my.oschina.net/chengpengvb/blog/5023676

6 . 开源视频播放系统

我发现大家对视频直播的需求比较大于是开源这个项目出来,减少重复工作,项目地址:https://github.com/chengpengvb/video

先看一下效果

主要功能包括:

1 .自动负载均衡(扩展agent数量)

    2 . 比较低的延迟

3 . 对于非IE内核使用H5的播放功能,IE使用的是rtmp(需要nginx-rtmp,因为IE不支持声音)

    4 . 支持声音播放

    5 . 同一播放流复用,不用重新解码

支持ssl加密方式

运行环境:

    1 . Windows、Linux

    2 . 2jdk1.8、ffmpeg、nodejs、nginx-rtmp(IE播放)

运行配置

    1 . video-regist的注册中心,常规配置bootstrap.yml

    2 . video-agent负责解码

3 .video-center,负责调用缓存业务中心

启动程序

    1 . video-regist

    2 . video-agent (可部署多个)

    3 . video-center

4 . 打开浏览器:http://127.0.0.1:8080/或者http://127.0.0.1:8080/index

引入css和js部分

参考multiPlay.html和default.html页面

前端api说明

var wssConn = wsConnect(window.location.host, UUID()); // 初始化一个连接对象(于后台交互),单例,UUID()为一个随机数标识

var video = $("dom").video(wssConn);

varoption= {

       url : rtsp,//rtsp流

       userName : userName,//rtsp流用户名

       passWord : passWord,//rtsp流密码

       width : 800,// 视频宽度

       height : 450,// 视频高度

       type : 0 // 解码类型0:cpu,1:qsv,2:cuda,查看agent端是否支持该解码方式,可能需要相关硬件

};

video.play(option,null);// 开始播放

video.close(); //关闭

作者:chengpeng

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,236评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,867评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,715评论 0 340
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,899评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,895评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,733评论 1 283
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,085评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,722评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,025评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,696评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,816评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,447评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,057评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,009评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,254评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,204评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,561评论 2 343

推荐阅读更多精彩内容