怎么做到微信直播，HTML5直播，低延时

功能模块概述

通过obs客户端推流到nginx流媒体服务器上，对流媒体用ffmpeg将流剪切为若干段ts流文件并保存到临时目录中，通过访问m3u8格式拼接ts流文件段来观看直播。

推流端

采用开源工具OBS客户端进行推流

根据项目的推流地址，填入OBS客户端（下载地址）中，并设置场景，保存后重启，便可开始推流。

为更加稳定的推流，建议使用以上链接中的v0625稳定版本，按提示安装完成后，打开设定在广播设定中，伺服器统一填写我们项目的流媒体接收流地址：

rtmp://127001:1935/hls/

以上这几个数据都是可以更改的。

127001——你的流媒体服务器ip

1935——你的rtmp端口号

hls——你的直播nginx配置模块

具体在下文中也有详细介绍

配置地址

回到主界面，右键来源，选择添加视频捕捉设备或获取窗口等（相关设置默认即可），点击开始串流，便可开始直播。

添加场景

图为添加视频捕捉设备后的直播画面：

直播中

流媒体服务器

Nginx接收推流模块

rtmp_auto_push on;

rtmp {

server {

listen 1935;

application hls {

live on;

hls on;

hls_path /tmp/hls;

on_publish 项目地址/liveOnPublish;

on_publish_done 项目地址/liveOnDone;

notify_method get;

}

}

}

配上我在word上的注解

注解1

Nginx处理直播流模块

http {

server {

listen 80;

server_name localhost;

location /hls {

secure_link $arg_st,$arg_e;

secure_link_md5 key$arg_e;

subs_filter ts 'tsst=$arg_st&e=$arg_e&clentip=$remote_addr';

subs_filter_types application/vndapplempegurl;

if ($secure_link = "") {

return 402;

}

if ($secure_link = "0") {

return 403;

}

# Serve HLS fragments

types {

application/vndapplempegurl m3u8;

video/mp2t ts;

}

root /tmp;

add_header Cache-Control no-cache;

}

}

}

注解2

项目部署服务器

流媒体服务器不通过项目服务器，整个直播过程的推流和处理流都在流媒体服务器上进行。项目服务器主要进行直播地址加密处理意见推流开始和结束触发的方法（liveOnPublish()，liveOnDone()）已及对直播地址加密

播放端

直接通过HTML5中的<video>标签设置src来播放直播流。如：

<video src="pro/livem3u8st=UM/L8jdfTlY2b1j1F6XSxA==&e=1468548530

" controls="controls"></video>

存在的问题

延迟待测试（不科学的数据是安卓手机普遍在30-40s，苹果手机在20-30s）

并发待测试

掉帧待测试（网速影响大，网络好几乎不掉帧，网络差掉一半，用户体验差）

http://ffmpegorg/ffmpeghtml

我最近也在做ffmpeg+ffserver实现流媒体服务器及时转码发送，

代码的功能只能在官网查。。

国内探讨这方面的人太少了。在谷歌搜国外的FFmpeg论坛也有不少东西。

一、FFmpeg推RTMP流准备工作

首先确保自已已经安装了nginx + rtmp服务器。

打开配置文件nginxconf

完成如下配置

nginx配置1

如果没有nginx + rtmp服务器，请阅读我的另一篇文章

Mac搭建nginx+rtmp服务器

二、FFmpeg推流

1推流MP4文件

视频文件地址：/Users/xu/Desktop/bangbangbangmp4

推流拉流地址：rtmp://localhost:1935/rtmplive/home

acc：RTMP的音频格式

flv： RTMP的视频格式

ffmpeg -re -i /Users/xu/Desktop/bangbangbangmp4-vcodec libx264 -acodec aac -f flv rtmp://localhost:1935/rtmplive/home

设置推流2

输入命令行后，暂时先不要点回车，等设置好本地拉流后，再进行推流。

2本地拉流MP4文件

打开VLC播放器

VLC3

设置播放地址

设置播放地址4

设置拉流地址

rtmp://localhost:1935/rtmplive/home

拉流地址5

开始推流，点击open后开始播放。

FFmpeg推流成功6

推流成功!

三、用ffmpeg推流桌面以及推流摄像头进行直播

1如果希望将桌面录制或者分享，可以使用命令行如下：

ffmpeg -f avfoundation -i "1" -vcodec libx264 -preset ultrafast -acodec libfaac -f flv rtmp://localhost:1935/rtmplive/home

这个只能够推桌面。

2如果需要桌面+麦克风，比如一般做远程教育分享 命令行如下：

ffmpeg -f avfoundation -i "1:0" -vcodec libx264 -preset ultrafast -acodec libmp3lame -ar 44100 -ac 1 -f flv rtmp://localhost:1935/rtmplive/home

这个可以推桌面+麦克风。

3如果需要桌面+麦克风，并且还要摄像头拍摄到自己，比如一般用于互动主播，游戏主播，命令行如下

ffmpeg -f avfoundation -framerate 30 -i "1:0" \-f avfoundation -framerate 30 -video_size 640x480 -i "0" \-c:v libx264 -preset ultrafast \-filter_complex 'overlay=main_w-overlay_w-10:main_h-overlay_h-10' -acodec libmp3lame -ar 44100 -ac 1 -f flv rtmp://localhost:1935/rtmplive/home

这个可以推桌面+麦克风，并且摄像头把人头放在界面下面

Snip20160713_12png

四、FFmpeg常用基本命令

1分离视频音频流

ffmpeg -i input_file -vcodeccopy-an output_file_video//分离视频流ffmpeg -i input_file -acodeccopy-vn output_file_audio//分离音频流

2视频解复用

ffmpeg–itestmp4 –vcodeccopy–an–fm4vtest264ffmpeg –itestavi –vcodeccopy–an–fm4vtest264

3视频转码

ffmpeg –i testmp4 –vcodec h264 –s352278–an –f m4v test264//转码为码流原始文件ffmpeg –i testmp4 –vcodec h264 –bf0–g25–s352278–an –f m4v test264//转码为码流原始文件

ffmpeg –i testavi -vcodec mpeg4 –vtag xvid –qsame test_xvidavi//转码为封装文件

-bf B帧数目控制

-g 关键帧间隔控制

-s 分辨率控制

4视频封装

ffmpeg –i video_file –i audio_file –vcodeccopy–acodeccopyoutput_file

5视频剪切

ffmpeg –i testavi –r1–f image2 image-%3djpeg//提取ffmpeg -ss0:1:30-t0:0:20-i inputavi -vcodec copy -acodec copy outputavi//剪切视频

-r 提取图像的频率

-ss 开始时间

-t 持续时间

6视频录制

ffmpeg –i rtsp://1921683205:5555/test –vcodec copy outavi

7YUV序列播放

ffplay -f rawvideo -video_size1920x1080 inputyuv

8YUV序列转AVI

ffmpeg–swh–pix_fmtyuv420p–iinputyuv –vcodecmpeg4outputavi

9常用参数说明：

主要参数：

i 设定输入流

f 设定输出格式

ss 开始时间

视频参数：

b 设定视频流量，默认为200Kbit/s-r 设定帧速率，默认为25

s 设定画面的宽与高-aspect 设定画面的比例

vn 不处理视频-vcodec 设定视频编解码器，未设定时则使用与输入流相同的编解码器

音频参数：

ar 设定采样率

ac 设定声音的Channel数

acodec 设定声音编解码器，未设定时则使用与输入流相同的编解码器an 不处理音频

ffmpeg

全平台视频转换

开源

RED5

Red5是一个采用Java开发开源的Flash流媒体服务器。它支持：把音频（MP3）和视频（FLV）转换成播放流； 录制客户端播放流（只支持FLV）；共享对象；现场直播流发布；远程调用。Red5使用RSTP作为流媒体传输协议，在其自带的一些示例中演示了在线录制，flash流媒体播放，在线聊天，视频会议等一些基本功能。

开源地址：[](https://githubcom/Red5/red5-server)

Darwin Streaming Server

easyDarwin

ffmpeg和ffserver配合使用可以实现实时的流媒体服务，可以实时传输来自摄像头的数据，客户端可以采用HTTP、RTSP、RTP协议等播放视频流。

一、概念和流程

ffmpeg和ffserver配合使用涉及到四个概念：

1 ffmpeg，负责媒体文件的转码工作，把你服务器上的源媒体文件转换成要发送出去的流媒体文件。

2 ffserver，负责响应客户端的流媒体请求，把流媒体数据发送给客户端。

3 ffserverconf，ffserver启动时的配置文件，在这个文件中主要是对网络协议，缓存文件feed1ffm和要发送的流媒体文件的格式参数做具体的设定。

4 feed1ffm，可以看成是一个流媒体数据的缓存文件，ffmpeg把转码好的数据发送给ffserver，如果没有客户端连接请求，ffserver把数据缓存到该文件中。

工作流程如下：

1、 启动ffserver，配置参数

ffserver先于ffmpeg启动，它在启动的时候需要加参数-f指定其配置文件，配置文件里包含端口信息、缓冲文件配置、传送流配置(如编码方式，帧率，采样率……)。

2、 启动ffmpeg，输入流

启动ffmpeg，向缓冲文件输入数据流，数据流可以来自摄像头，也可以来自本来就存在的文件。

feed1ffm是一个缓冲文件，fserver启动后，feed1ffm就会自动被创建，feed1ffm开始的部分已经写入向客户端传送流的配置信息，在feed1ffm做缓冲用的时候，这些信息是不会被覆盖掉。