首页 > 传媒 > 关键词 > 实时音视频最新资讯 > 正文

实时音视频选型 开发者应该避开哪些坑?

2020-07-27 14:36 · 稿源:站长之家用户投稿

  实时音视频技术的专业度和复杂度都很高,通过PaaS服务商来集成实时音视频,快速开发App,是时下开发者的优先选择。所选RTC是否好用易用、契合所需场景,将直接影响项目开发进度和后期运维成本。

  开发者需要了解实时音视频技术选型中要避开的坑点,以便提高开发集成效率。具体来说,以下四个方面要综合考虑。

  一、实时音视频与IM能力不宜分散

  几乎100%的实时音视频在线应用都有文字/语音消息、文件传输、图片显示等IM需求。

  目前市场上PaaS服务商这两方面能力强弱不一:有的大厂虽然两方面能力都提供,但不能确保两种能力同样高质量;有的专业 RTC 厂商,只能提供RTC能力,IM能力还得由第三方专业服务商提供。

  这样,便迫使开发者在集成过程中不得不分别选择服务商。当实时音视频与IM质量不稳定时,需要逐一协调各个服务商,逐一排查问题,无形中增加了后期的运营成本。其实,IM和音视频在很多场景下有耦合,建议开发者在选型一开始就要考虑具有RTC+IM双重高保障能力的通信云厂商,尽量“用一套 SDK,解决所有通信场景”。

任杰总2

  对开发者来说两项功能同时开发,开发包相对比较小;如果前期只用到了IM,没有用到RTC,那么只需要学习IM方面的开发文档就可以了,一旦有了RTC需求,再去学习RTC文档,开发者只需接入相关接口,快速与IM能力做对接和匹配,即可完成两类功能在App生命周期里的全覆盖。

  除了开发上的易快速上手外,选择“IM+RTC+推送”整合的解决方案,开发者还可以享受一致的网络架构,提高传输的效率和质量,获得一致的服务保障。例如,融云近期升级了实时音视频能力,RTC的通信信令是复用IM信令通道,可以确保消息100%的连通率和到达率,使底层的通信优势发挥到最大。

  二、延时、卡顿、抖动的质量问题要解决好

  通过调研发现,用户最不能接受实时音视频的三个质量问题是延时、卡顿、抖动。

  低延时要靠两个方面解决,一个是传输协议,一个是优化整体传输环节。实时音视频的主流传输协议有RTMP和UDP两种,一种支持CDN技术,一种支持WebRTC技术,相对来说,CDN技术延时性在3- 5 秒,WebRTC可以在几百毫秒以内,现在很多厂商可以同时支持这两种技术,分别适用于不同的场景。

  整体传输环节中,采集/渲染、编解码/网络往返都会有一定的延时,有些是硬件的物理延迟,需要靠5G这样底层网络技术的提升,或者布更多的数据中心、边缘结点,便于就近接入;有些要针对实际场景,在具体形态上做一些权衡,比如在处理粒度上粗细的考虑,越细的粒度传输的数据包相对较大,延迟也会更高。

  当音视频出现卡顿时,有一个视频流畅优先的原则。我们通过降低一些码率和帧率,即使画面模糊一点,也要让用户视觉上是流畅不卡顿的。这样在选型时候,要考虑几个方面:一个是优化低码率下的视频清晰度;二是要有带宽估算能力,当预判到这个带宽没法承受高清晰视频传输时,自动转化成低码率并通过优化算法,使低码率视频清晰度能媲美高清视频。

音视频弱网优势

  另外,数据包通常会以错误的顺序到达,从而产生抖动相关问题,或者直接丢失,造成音视频空白。谷歌一份资料显示,视频聊天应用 Duo 99%的通话都有数据包丢失、过度抖动或网络延迟情况。20%的通话丢失了超过3%的音频,10%的通话丢包率超过8%,也就是说每次通话都有很多音频需要替换。

  处理上述问题,很多厂商会采用抗丢包及抗网络抖动能力的NACK(丢包重传)、FEC(前向纠错)、自适应带宽调整(动态调整码)、接收端 Jitter Buffer(媒体流平稳)等各种机制,有些是组合使用,有些是单独使用,开发者在选型前一定要做到深入了解。

  三、拥有全球通信和场景化能力

  刚才谈到低延时、抗丢包的解决策略,有些是与网络接入路径长短直接相关的。比如中美两地的音视频连接,没有全球通信网络支持、数据中心和节点布局的厂商是提供不了服务的。开发者选型开发前,就要考虑到自己业务的所属范围。

  选择全球化服务的云厂商,除了看数据中心和节点分布外,还要仔细考察全球网络布局的品质,简单说,有的厂商提供了全球网络优化能力,中美之间的音视频连接在未优化前要经过 100 多跳,而优化后仅 6 跳就能完成连通。这是由于,这些厂商拥有自有的路径最优算法,通过智能路由就近接入,即使在异国/地网络环境较差的情况下,仍然能够及时切换到更好的线路上去。比如融云拥有全球优化加速网络,实时音视频通话可做到全球端到端延时小于400ms,最低延时66ms,保障端到端之间延迟无感知的实时互动。

  在场景化能力上,实际上相比IM,实时音视频更加通道化,在各个场景中复用的程度也相对较高,能力也更基础。优秀的PaaS厂商会按场景提供不同的Demo,音视频技术的升级也针对解决更多的应用场景去优化,便于开发者拿来即用,这种方式对入门级的开发者都十分友好。各种API接口相对独立,开发者只需关注和使用所需要的SDK,就可以实现想要的场景,大大降低集成开发的难度。

  四、开发者服务足够完善

  在一些社区中,我们常常会看到一些技术文档下,开发者提出问题而没有回复。开发者为提高开发效率,越来越倾向于自助完成工作,因此,开发文档是否易懂,Demo 是否易用,都显得十分重要。

  另外,工单回复的速度,微信群、社区的值守和响应程度等都能反映PaaS厂商服务意识的强弱。通常来说,7× 24 小时技术支持服务, 1 小时工单快速回复、快速远程接入、快速恢复的故障应急响应机制,这些都是对开发者很完善的服务支持。

  有些厂商还会提供特色的质量监控服务,比如融云“北极星”的质量问题排查平台,通过可视化图表,快速定位卡顿位置,实时统计丢包率,使开发者可以自助排查每一次音视频通话过程中的丢包率、网络带宽等通信技术参数。可以直接定位用户问题,提高排查效率,提升用户体验。

免责声明:“站长之家”的传媒资讯页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与我们联系删除或处理。稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性,更不对您的投资构成建议。我们不鼓励任何形式的投资行为、购买使用行为。

  • 相关推荐
  • 大家在看
  • 抖音视频格式要求 抖音视频格式有什么要求

    抖音在上传视频的时候,格式、大小、清晰度等方面需要注意什么,上传视频的格式有哪些要求呢,这里我们来看下抖音视频格式的几个要求,大家在编辑视频的时候要注意以下几点。

  • 抖音视频题材及素材确定 抖音视频题材和素材哪里找

    抖音创作的视频在哪里可以找到比较好的拍摄题材和视频素材,如果是新进入到短视频领域的用户肯定对题材和素材需求比较大,那么这里我们来一起看下如何找到比较适合自己的题材内容。

  • 抖音视频怎么去水印 抖音怎么导出无水印视频

    抖音平台上如果看到比较喜欢的视频时,想要把这个视频保存到自己手机上,又想要是无水印的视频,那么要怎么做才可以把无水印视频保存到自己手机上呢,我们来看下具体的保持方法。

  • 抖音视频没有播放量,是不是被限流了

    有部分抖音用户发现自己的视频没有了播放量,显示为0的情况发生,这样的情况是不是被官方限流了,要怎么办才可以让播放量恢复到正常的情况下,以下我们来帮助大家看下如何解决自己播放量为0的情况。

  • 抖音视频暂时无法保存怎么办 视频无法保存解决方法

    抖音视频暂时无法保存下载是怎么回事,相信也有很多抖音用户在使用抖音APP的时候出现视频暂时无法下载保存的情况,这里我们来看下为什么无法下载保存以及解决的方法。

  • 抖音发视频要不要加定位 抖音视频定位怎么添加

    在上传发布抖音视频的时候,要不要添加定位信息。如果是添加定位信息的话,能不能带来比较好的点击量等数据呢,这里我们来看下抖音视频添加定位好处分析以及定位添加方法。

  • 抖音视频发第二遍真的会火吗

    抖音视频发第二遍会火吗,在很早之前就有人提出了这样的疑问,并且在抖音上引起了十分多用户的关注,但实际上这样的想法并没有任何的数据支持和依据,因此视频发布第二遍会不会火呢,我们来一起分析下这件事情的原因。

  • 抖音视频什么时候发布最佳 抖音什么时间发容易上热门

    抖音短视频在几点的时候发布比较容易上热门,什么时间发布视频最佳?相信很多用户都有考虑如何选择比较好的时间来发布视频,这里我们来看下哪个时间段发布视频最好,比较容易获得热搜。

  • 抖音视频标题怎么写吸引人 标题怎么取比较好听

    短视频标题是除了封面外最吸引用户点击观看的一个元素,如何在短短的几个字内吸引到目标观看群体成为了很多短视频制作者十分关心的课题,这里我们就来看下如何写好抖音短视频的标题,让用户有更强的欲望点击观看。

  • 万兴喵影APP5.0登陆各应用商店 音视频剪辑、模板特效强势上新

    9月27日,A股创意软件上市企业万兴科技(300624.SZ)再度加码数字创意业务移动端布局。当天,万兴科技旗下万兴喵影APP5.0正式全新上线。据了解,万兴喵影APP5.0 秉持“随时随地创作你的故事”理念,在视频剪辑、音频剪辑、模板特效等性能上取得出诸多突破,进一步升级移动端视频剪辑创造力。目前新版本已登陆腾讯应用宝、小米应用商城、VIVO应用商城、OPPO应用商城、华为应用商城、魅族应用商城、苹果商城、AppChina应用汇等应用商店,用户

  • Microsoft Teams推出基于AI打造的实时消噪功能

    据外媒报道,微软宣布了一项针对MicrosoftTeams的新功能。这个预计将在11月推出的功能是一项基于AI打造的消噪系统,它的表现将要优于现版本对不受欢迎背景音的消除功能。

  • 滴滴柴华:滴滴实时公交业务已覆盖超80城市

    滴滴地图与公交事业部总经理柴华今日对外表示,目前滴滴导航能力已开放至乘客端,滴滴实时公交业务也已覆盖超80城市。柴华还强调,通过引入深度学习的技术,对海量真实出行轨迹、路网拥堵数据、不同天气道路路况等进行自动学习,滴滴能在大规模请求下快速进行智能路径规划,为用户精准预估到达时间,“滴滴预估到达时间(ETA)误差率已经从出行行业16%降低至10.5%。”柴华表示,目前滴滴地图的导航能力已

  • 小米闻声新增字幕模式:语音实时转文字 识别率达98%

    9月27日是第63届“国际聋人节”。MIUI官方宣布,小米闻声新增字幕模式。现在就可以前往小米社区App申请参与内测。在小米闻声的小窗模式下,将小窗贴近屏幕两侧可进入字幕模式,依然

  • Soul构建智能实时风控系统,为用户营造安全的社交环境

    真实的社交场景是需要建立在安全之上,这样才能给用户带来全新的体验。Soul作为一个基于心灵的社交平台,深谙这个道理。一直以来,Soul深入洞察年轻消费者的需求,推出更多创新玩法,打造全新线上社交体验。与此同时,Soul还构建了一套领先于行业的智能实时风控系统,为用户营造安全的社交环境。Soul内容举报页面Soul成立于 2014 年,自品牌成立以来,Soul 采取多维度措施,为年轻用户构建安全的网络环境,护航社交安全。比如Soul?

  • 马上金融自研智能语音实时质检系统上线,质检成本可减少95%

    随着科技的不断发展,AI对人工质检员的代替,让语音质检变的更加高效、智能,并节约了人力成本,而智能语音质检技术正在成为呼叫中心质检领域的宠儿。作为科技驱动的持牌消费金融机构,马上金融自主研发的智能语音实时质检系统,可在线实时对远程呼叫中心坐席与用户交互行为规范性进行质检,全程无需人工干预,实现100%全量AI实时质检和精准情绪检测,有效规范坐席话术,降低呼叫中心合规风险。马上金融智能语音实时质检的核心优势

  • 华为智选智能水杯开售:配OLED屏 实时显示温度

    成年人体内含水量约为60%~70%之间,人体缺水时会产生口渴、咳嗽、疲劳、血压下降等生理反应。国家卫生计生委发布的新版《中国居民膳食指南(2016)》里,把成年人日均建议饮水量从1200毫升(6杯)

  • DataPipeline助力吉利集团实时数据采集同步平台建设

    9月20日,吉利集团和DataPipeline公司共同宣布,DataPipeline协助吉利集团搭建的集团化实时数据采集同步平台正式投入使用。该项目的实施对于推动吉利集团实现企业数字化转型、数据规范化和集约化管理、增强其持久核心竞争力具有重要意义。1986年诞生的吉利集团,经过34年的发展,确立了其中国品牌汽车领袖的市场地位,进入全球汽车行业第一阵营。2019年,吉利集团旗下各品牌在全球累计销售汽车超217.8万辆,市占率从6.2%提升至6.5%,全年营

  • RTE 2020启动报名 八大论坛打造全球最大规模实时互联网盛会

    9 月22日,全球领先的实时互动API平台声网Agora 宣布 RTE 2020 实时互联网大会(原RTC大会)正式启动报名,今年 RTE 大会将于10月22日-25日举行,采取线上、线下相结合的会议方式,举办包括主论坛、三场技术论坛、三场行业论坛、创业与生态论坛在内的八大论坛,邀请了来自美团、搜狗、爱奇艺、饿了么、掌门教育、豌豆思维、伯索云学堂、伊对、Rokid、驭势科技、CSDN、晨兴资本、北京大学、北京邮电大学等超过40家企业与组织机构的7

  • 抖音单条视频定位标准 抖音怎么让单条视频变火

    抖音上每隔一段时间就会出现单条视频百万、千万级别的播放量,成为全网爆款,这些视频是如何创造出来,这就要从单条视频的定位标准比较基础的功课来说起,下面我们来看下单条视频的定位标准。

  • 全民拥抱短视频的时代,长视频平台如何夺回用户?

    “平台管理水平低下,盈利模式老旧,部分创作和营销走上邪路。新冠不过是一口最容易坐实的黑锅。”在 10 月 13 日举办的第八届中国网络视听大会现场,湖南广电集团董事长、芒果超媒董事长张华立在演讲中并没有大谈今年芒果tv的成功,一上来就聊起了当下长视频平台的的困境,甚至认为“长视频行业面临诞生以来前所未有的危机”。

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议
  • 热门标签