2020-08-31 15:00:41

全美的直播技术架构，提供了从端到端的完整解决方案，可以助力用户快速搭建直播系统，实现直播功能。

一、技术能力介绍

下面我们看下整个直播系统都涉及到哪些具体环节，每个环节都是怎么实现的。

1、推流端

直播推流端即主播端，主要通过手机摄像头采集视频数据和麦克风采集音频数据，经过一系列前处理、编码、推流，直到CDN进行分发。

（1）、 高级美颜

前处理是对视频进行渲染，比如美颜、水印、贴图、混音、降噪等处理。其中直播平台必备的美颜功能，是通过算法去识别人脸的皮肤部分，对皮肤区域进行色值调整从而实现的。现在，全美以技术普惠大众的价值观将基于人脸识别的瘦脸、小脸、大眼、腮红等高级美颜功能完全免费开放。同时，通过标准化封装，推流SDK提供标准接口，可支持第三方美颜能力的接入，让用户基于自身业务做选择。

（2）、 实时混音

在推流阶段，全美还开放了时下热门的混音技术，它是将采集的人声和音乐声进行混合后输出，并支持降噪和耳返功能。整个技术流程是：将背景音乐解码成PCM音频数据，同时，将麦克风采集的PCM音频数据进行降噪处理，二者合成，在主播端直接播放PCM音频，在观众端则先进行音频编码再通过RTMP推送音频流并完成播放。

二、直播服务端处理

在推流完成后，直播服务端需要进行技术实现，包括实时转码，鉴黄，直播截图，直播录制，添加水印，时移观看，直播答题等，同时确保稳定、流畅和实时数据可见性。

1、 实时转码

实时转码是将一路流转成多路不同清晰度的流，在移动直播场景应用较少，但在PC端推上来的流一般是比较高清的，所以较为有效。全美提供的窄带高清技术，使用高配转码集群，高度复杂编码算法，在同等质量下提供更好的压缩率，节省20%-30%的流量带宽。

2、直播鉴黄

为了确保平台内容的合规，直播鉴黄是十分必要的一环。大型的直播平台通过人工鉴黄，成本高昂且不够精准。所以，选择人工智能技术鉴别黄色内容，可以减少审核人力，有效降低平台涉黄风险。

在直播系统中接入API后，人工智能技术可以对秒级截图的甄别，判定这个直播的色情程度，进行合理打分，也会给出建议处理方式，帮助平台实现内容管控。

3、 直播时移

直播时移是一种点播和直播想结合的能力，简单来说就是支持已经直播过的内容的实时回看。这个功能是结合播放器SDK，通过简单的几个接口调用就能实现。在网络电视、网络直播中，是十分常见的。

4、 直播答题

针对最近十分火热的直播答题，全美也推出了解决方案。在技术上是这么实现的：主持人发出答题信号，现场导播人员通过接入方的AppServer，调用全美的OpenAPI，在视频帧中插入SEI信息，播放器在解析SEI帧 并回调给APP，在播放端上进行展示。这其中比较关键的点是，SEI信息在CDN分发和转码等处理过程中，是不会被丢掉的。这也确保了所有用户端都能顺利完成推题。另外，整个方案通过同步服务器，进行同一传输通道同时传输，可实现高精度画题同步，保证用户体验。