首页 > 业界 > 关键词 > 融云最新资讯 > 正文

融云2021 X-Meetup技术沙龙 探讨音视频技术新方向

2021-05-20 10:55 · 稿源:站长之家用户

2021 年 5 月 15 日,融云X-Meetup技术沙龙第三站续航上海。本场沙龙聚焦“音视频技术新方向”,由融云音视频研发高级工程师姜春雨、时光机器人创始人兼CEO徐晶、融云IM研发中心高级工程师刘佳、学而思网校架构师李亚龙,和资深音视频技术专家栗伟,五位技术大咖出任演讲嘉宾,他们以时下热门应用场景为视角,从技术实践出发,与开发者们交流分享了关于音视频技术的新观察。

iOS 上的音频开发

今年,由于Clubhouse和Tiya的示范效应,语聊房产品大火,音频的开发技术备受开发者的关注。来自融云的音视频研发高级工程师姜春雨,多年专注于移动端和音视频领域的技术研发,他分享了《iOS 音频设备开发 - Core Audio》的主题内容。

融云音视频研发高级工程师姜春雨发表演讲

姜春雨认为:移动端音频处理的难点在于声音美化、变声、实时高音质和场景玩法多样化。单从iOS设备来说,要突破这些难点,离不开iOS所提供的Audio Unit,它是一项强大灵活的音频处理技术,支持混合、均衡、格式转换和实时输入/输出,用于录制、播放、离线渲染和实时对话。

融云SDK以Audio Unit为基础,构建了长音效、短音效等多个功能模块,最终在音频设备上完成混音输出。在场景化实践中,姜春雨以音乐语聊房和百人超大会议室两个典型场景为例,分享了融云SDK的技术开发优化方案。比如,音乐语聊房注重高音质、美声变声,以舒适噪音为好,开发者要根据这些需求进行算法调优;而超大会议室的优化则要求做到服务端智能发流、多人声音同时出现可以智能选择会议发言人的声音。

姜春雨总结道:Audio Unit是一个强大的音频处理框架,音频处理要基于Audio Unit框架构建内容,并且要在音频处理内容上不断打磨优化。未来,融云音视频SDK还将不断基于不同场景需要开发新的功能,持续优化音频产品,为开发者提供更好的解决方案。

构建低延迟高可靠的信令系统

融云作为互联网通信云赛道的领先厂商, 2020 年在业界率先提出“IM+RTC+PUSH”的整体通信解决方案。融云RTC唤起用户的通道就是依赖于IM的SDK信令,因此,本次融云的IM研发中心高级工程师刘佳,分享了《构建低延迟高可靠信令系统的探索与实践》,帮助开发者更好地了解融云IM如何协同RTC,提供高可靠的通信能力。

融云IM研发中心高级工程师刘佳

刘佳介绍,高可靠音视频信令系统的构建在IM信令系统设计时,首先要进行服务分层,包括接入层、内部服务和数据存储的分层。而拆分原则要根据业务差异和服务对象的不同,拆分为API和 CMP,整体做到可监控、可维护。其次,是要搭建完整的监控体系,通过可视化的图表,监看网络的性能情况,及时处理系统瓶颈。

对于低延迟信令系统的实现,刘佳分享道,融云不仅利用全球加速网络,降低网络延迟,还基于融云自有通讯协议降低数据传输量,利用缓存机制,提高了服务的业务处理速度。并且,刘佳以缓存设计为例,说明通过一致性hash提高缓存命中率、高效利用CPU的处理能力、实施异步存储等,也都是实现低延迟系统设计的要旨。

基于这些设计要点,刘佳展示了海量并发用户场景下的语聊房系统架构,为开发者提供了干货解决方案。同时,他还总结出融云现有的音视频整体服务架构的三大优势:第一,信令服务与媒体服务解藕,两个服务之间也不需要状态同步;第二,媒体服务专注通信,信令服务专注能力;第三,部署简单,方便进行全球部署媒体服务。

直播系统架构设计 满足用户对实时性的需求

本场沙龙中,音视频直播场景也是一个重点话题。深耕互联网音视频 12 年,在直播领域积累了丰富实战经验的拾光机器人公司创始人兼 CEO徐晶,通过他的《互联网直播快速实战》,分享了基于直播答题场景的架构设计,尤其是几个关键技术点和应对策略,以及如何保证直播中的视频和音频质量,都做出了详细的讲解。

沙龙中,专注于在线教育的学而思网校架构师李亚龙,还针对教育低延时大班的直播场景,为开发者带来了关于《在线教育直播系统架构升级》的分享。他着重从网校视频技术的发展、网校大班直播系统、网校公益直播课、低延迟直播探索这四个方面的设计要点,进行了分析讲解。对于专注在线教育的开发者而言,具有普遍的示范意义。

此外,资深音视频技术专家的栗伟,发表了《使用WebRTC构建实时在线课堂》的演讲。栗伟曾任职于中科院计算所、CC视频,任职期间利用WebRTC技术开发了直播、在线课堂、视频会议等商业产品,并发用户数达到 500 万。他还曾主笔撰写了 《WebRTC技术详解:从 0 到 1 构建多人视频会议系统》,在该领域有多年实践经验,对WebRTC有非常深入的研究,他的实践分享也让开发者们获益匪浅。

结语

在本次沙龙中,五位讲师的分享,其共性特点在于:他们都基于当下所关注热门场景展开话题。由此可见,应用场景才是“探讨音视频技术新方向”的基础,而越热门的场景往往越是代表着这个领域的发展潜力更大,因此也就越需要通过新技术、新产品加以承载。

随着5G的进一步落地,网络带宽、网络质量的不断优化,音视频通信无论在使用量级上,还是使用场景上,都会出现更多可能。对于开发者而言,只有及早储备,尽可能多地掌握新技术,关注新方向,才能赢在当下,赢在未来。

  • 相关推荐
  • 大家在看
  • 融云创:以计算为依托 赋能金融数字化转型

    近年来,随着大数据、人工智能、区块链等新兴技术的广泛应用,云计算技术在不同的业务场景中与新技术的融合,基于自身技术的特点和适用性,发挥各自的优势,推进业务创新实践,成为驱动金融机构数字化转型的关键技术。 云计算可以把许多计算资源集合起来,通过软件实现自动化管理,只需要很少的人参与,就能让资源被快速提供。随着云计算技术逐步向金融行业渗透,传统金融机构开始高度关注云计算架构下 IT 系统的发展和应用部署。

  • IDC中国金融云市场报告:阿里、腾讯、京东等位居前五

    日前,全球知名市场研究机构IDC最新发布《中国金融云市场(2020下半年)跟踪》的报告显示,阿里、腾讯、华为、百度和京东云市场份额位居前五。

  • 融云创成为工信部中国信通院“卓信大数据计划”首批成员单位

    近日,由中国信息通信研究院(下称“中国信通院”)举办的“卓越安全,不止可信” 2021 卓信大数据峰会在京召开。工业和信息化部网络安全管理局处长尚铁力、中国信息通信研究院副院长王志勤出席会议并致辞。会议发布了“卓信大数据计划”多项重磅成果及首批 100 家成员企业名单,百融云创凭借长期在数据安全领域积累的综合实力,成功入选,成为促进数据安全建设的代表企业。当前,数据已成为国家基础性战略资源、重要生产要素,对?

  • 融云亮相 CDEC2021 上海站 全场景通信能力赋能企业数字升级

    4 月 22 日,由海比研究院、中国软件行业协会等支持,中国软件网主办的 CDEC2021 中国数字智能生态大会暨第十四届中国软件渠道大会上海站活动,盛大召开。CDEC2021中国数字智能生态大会上海站 融云与上海本地数百家ISV、SI、渠道商、服务商一起出席活动,共同探讨数智时代企业发展的新机遇、新思路,以及融云如何深耕信创产业,更好地携手 SI/ISV 合作伙伴,共同为政府、金融、教育等行业客户赋能通信云能力。会上,融云联合创始?

  • 网三剑客 | 闯荡“上江湖”,移动教你绝招!

    摘要:行走江湖霸气宣言:云间高速,致富之路!企业生存,是一场江湖大比拼市场瞬息万变,降本增效成过招关键于是越来越多企业“搬到云上”有云的地方也形成新的江湖格局催生一批快意江湖的“云中剑客”···故事发生在云江湖上人才辈出的——移动云总坛 · 云网络分堂三位年轻才俊正在筹备江湖历练一事他们必须通过掌门设置的重重考验师兄弟三人踏云而来人称「云网三剑客」行走江湖,我们的霸气宣言是“云间高速,致富之路”考验

  • 移动钜惠享不停,上正当时!

    又是一年517时代交替,技术发展一起看看信息科技带来的变化吧关于沟通以前,鸿雁传书,一来一往数日现在,随时随地见屏如面,一触即达关于会议以前,齐聚一处,成本居高不下现在,即时会议,实时共享高效沟通关于旅游以前,走马观花,人潮拥挤现在,VR旅游,身临其境看美景关于企业转型以前,上云是什么?上云后干啥?现在,全面上云,积极拥抱数字化转型5. 17 世界电信日移动云给大家送福利啦热销爆款,精选特惠让上云省力又省心?

  • Keep X 瑞云服务云”端服务让运动更自由

    导读:近日,国内领先的运动科技品牌Keep与瑞云服务云达成合作,将基于瑞云服务云平台构建统一的售后服务平台,实现工单管理、配件管理、分拣中心、客户回访、服务营销、工厂返修在线化管理,提升服务效率、服务体验并挖掘客户价值。Keep:运动科技领域的龙头作为运动科技领域的网红品牌,Keep成立于 2014 年,业务覆盖线上运动平台 App,运动品牌消费品及线下运动空间Keepland,可以为用户提供健身教学、跑步、骑行、交友及健身饮

  • 智数“星谋”重磅发布

    2015 年,美的集团自研的互联网大数据产品“观星台”诞生。 2017 年,美云智数对外提供观星台SaaS服务,累计已获得20+细分行业的100+客户的认可。 2021 年 4 月,“互联网大数据+AI”强势升级,并正式更名为“星谋云”。星谋云,星罗全网以谋事布局,从观星看数到注重策略战术,致力于帮助企业研究行业和友商,锁定产品和用户,洞察趋势和机会点,为企业全价值链提供数据决策。策略1:数字企划场景提供产品企划全流程的数据支持。?

  • UCloud优刻得混合打通公有和本地部署 助力企业用自由

    由于本地或IDC托管服务器集群在计算、存储、备份及安全防护能力上均会有所限制,而公有云具备灵活易扩展、弹性付费、安全可靠等优势,如果将本地环境和公有云打通融合成混合云架构,就能够保障在本地部署自主可控的同时,还能享受公有云带来的红利。 (架构图:UCloud优刻得混合云架构解决方案) 如上图所示,UCloud优刻得混合云支持的架构形态主要包括以下三种: IDC服务器+UCloud优刻得公有云:一些特定行业用户基于合规、制度的?

  • 构建中国生态 | 华数据与天翼完成产品兼容互认证 携手推动信创快速发展

    如今,信创产业已成为创新发展的新动能。“十四五”规划为信创产业指明了未来方向和路径,各级政府、科研机构以及产业链生态企业正在联动发展,强力推进信创战略。而从技术发展角度来看,云计算、大数据、AI、5G、物联网等新一代数字化技术加速在各个行业中落地,带来了云、边、端侧智慧应用的井喷,在云化基础上的数智融合成为大势所趋,这也加速推动了信创云的发展与落地。为了推动信创云发展,加速数字化转型进程。日前,华云数

  • 天翼盘“+生态”2.0启动,携手生态伙伴共筑上数字生活

    2021年世界电信日“在充满挑战的时代加速数字化转型”的新形式下,中国电信以“共筑数字生活·推进数字化转型”为主题积极响应,全面推出5G云套餐,集合云空间、云应用以及智慧家庭的优势云业务,推进数字生活计划。 为承接中国电信全面“5G+云”策略,旗下云业务的典型代表,天翼云盘同时间启动「云+生态」开放合作战略2.0升级版,携手来自办公、教育、智能家居、健康医疗、智能硬件等垂直领域头部合作伙伴近60余家,共同在产品?

  • 阿里日本vps服务器多少钱 阿里日本服务器租用价格

    阿里云是国内数一数二的vps云服务器主机商了,质量口碑都十分不错,阿里云国内版也是有日本机房的,一些朋友想买还不清楚大概多少钱,下面就来为大家分享一下。

  • 之家X金蝶·星瀚:数字化协同创新的选择

    企业数字化转型的核心是什么?如何打造基于端到端的价值协同动能,顺时应势的战略协同势能,激发组织生态协同的全员潜能?云之家,通过云原生协同能力平台,将助力企业夯实迈向世界一流的组织基石,提升数字化协同创新能力!“金蝶云·星瀚”品牌,于2021年5月正式发布,旨在将金蝶逾20年大企业管理经验、解决方案、行业实践 沉淀封装,为大企业提供成熟的、可组装、可拓展的企业业务能力,实现从ERP到EBC(Enterprise Business Capa

  • 手机风口正当时 多多手机丰富形式合伙创业

    5G时代是开启云端的时代,随着腾讯、阿里、华为、谷歌、英伟达等众多国内外科技大厂进军云市场。5G云手机逐渐成为了当下的热门宠儿,作为“5G时代下的超级流量入口”,显然也受到了更多人的关注。云手机这个全新的赛道也带来了全新的机会,在众多品牌云手机互相竞争的蓝海市场中,如何短平快实现云手机的加盟、合伙、创业?“多多云·创业者联盟”为你而来。多多云科技作为华为战略合作伙伴,在云计算、云服务、云手机领域上共同发

  • 阿里盘为何这么强调“不限速”

    这些天,个人云存储的圈子里都快炸了锅,几乎所有人都在讨论着一款3月底才公测的新网盘——阿里云盘。根据最新数据,阿里云盘公测后不久就成功达成了AppStore第二名、小米应用商店第一名的成就。一般来说,这种位置都是被手游、社交软件霸占的,一款网络云盘能有这么高的下载量,很多年不见了。之所以能有如此表现,主要是因为阿里云盘团队对外公开承诺,阿里云盘“现在不限速,未来也不会限速。”“无论是不是会员vip,都不会限速。”要知道

  • 工信人才&轴科技:首家计算信创人才联合培训单位花落ZStack!

    近日,工业和信息化部人才交流中心(简称“工信人才”)同上海云轴信息科技有限公司(简称“云轴科技”)签署云计算联合培训认证合作协议(简称“合作协议”),共同面向国内云计算领域提供云计算培训认证服务,这也是工信人才首次与云计算厂商就信创人才培养签署联合培训协议!在合作协议签署后,通过ZStack云计算培训认证的学员,可申领工信人才与云轴科技联合颁发的ZStack云计算认证证书,为持证上岗、持证操作的数据中心生产作业要?

  • 京东携手南省工信厅 推动南高原绿色食品出滇

    中国拥有着极其丰富的物产和特色地域环境,也孕育了各式各样富饶的食物特产。云南地处中国西南边陲,气候宜人,其得天独厚的自然条件,造就了其区域产品绿色、生态、健康的标签。近年来,随着旅游业的发展,越来越多的消费者了解到云南不仅仅风景秀美,其区域特色酒、普洱茶、咖啡等等也更加为人所知。4月22日,京东与云南省工业和信息化厅达成战略合作,双方将推动“互联网+产业带”模式的创新发展,通过全产业链资源整合,优化区

  • 欧科链集团“星途计划”发布

    继推出产业人才培养的“鲲鹏计划”后,全球领先的区块链产业集团欧科云链集团于 4 月 26 日,正式宣布启动了区块链科普行动——“星途计划”,行动包括将在全国范围展开系列沙龙,加大力度推进区块链科普进机关、进国企、进校园等,充分发挥自身的技术积累与产业优势,联合政府部门、行业协会等共同构建起更加完善和有效的区块链科普教育生态,与此同时,直击区块链科普现存痛点,推出简单易懂的“秒懂区块链”公益短视频课。该计?

  • 快手发布剪、快手直播两款产品 满足专业剪辑和直播需求

    今日,快手光合创作者大会上,快手音视频中台负责人宣布发布快手云剪、快手云直播两款产品,满足专业和准专业创作者PC端视频编辑、直播导播等多元需求。同时宣布快手全面支持全景视频的上传与播放,提升创作者在快手平台的音视频体验。

  • 数据携“安超基座”亮相华为中国生态大会 共同开创数字化转型新局面

    2021 年 5 月17- 18 日,华为中国生态大会 2021 于深圳福田国际会展中心开幕。本次大会以“因聚而生,有能有为”为主题,来自国内外上万名合作伙伴参与盛会。华云数据作为中国综合云计算服务商、华为重要的生态合作伙伴受邀出席,并携“安超云基座”亮相现场。随着5G、云计算、人工智能、物联网、大数据等前沿技术的充分整合和运用,数字化转型按下了加速键,并正在为政企业务带来革命性升级。站在数字时代的新起点,我们看到,数?

  • 热门标签

热文

  • 3 天
  • 7天