首页 > 传媒 > 关键词 > 即构最新资讯 > 正文

泛娱乐行业新玩法:在线KTV、线上电影配音

2020-06-05 10:38 · 稿源:站长之家用户投稿

图片 1.png

周三,即构泛娱乐行业活动第二期开讲,即构售前架构师张靖雨分享了泛娱乐社交行业两大新玩法:在线KTV、线上电影配音。下面我们准备了活动回放视频、演讲PPT资料和文字稿,错过直播的小伙伴可以进行回看。

在上期活动中,我们了解到在 2016 年之前,泛娱乐直播主要是基于熟人的实时社交,包括实时视频社交和1V1 私密视频社交。在 2018 年后,陌生人视频社交渐渐逐渐涌现,以秀场连麦PK、语聊房、短视频社交为主的陌生人视频社交玩法广受用户喜爱。

今天我们要分享的也是基于陌生人社交的两种泛娱乐新玩法:在线KTV和线上电影配音

在线KTV大家都不陌生,今年初,某K歌平台推出了一系列全民抗“疫”的营销策略,包含了加油歌单、短视频、音频电台、在线K歌等形式,鼓励大家发布抗击疫情的正能量短视频,呼吁用“同唱一首歌”等方式响应防疫号召,用歌声给一线的医务人员加油打气。我们今天介绍的线上KTV,比目前的主流玩法更突出实时性和互动性。

另一个是线上影视配音,《声临其境》应该很多人都非常熟悉,这是芒果台推出的一款热门综艺,选取经典的影视片段,邀请明星嘉宾进行同台竞技,通过明星嘉宾的台词功底、配音实力来进行配音竞演。线上电影配音把《声临其境》搬到了线上,让更多用户也能进行配音PK。

下面我们先来看看在线KTV如何增加实时性和互动性,以及在技术实现上有哪些难点要攻克。

一、在线KTV

目前主流的KTV玩法,大部分是基于录制点播实现的。单人K歌,是通过下载好的本地伴奏,再配上自己的演唱声音,录制后上传到平台的。合唱则是用户下载已有的演唱片段,与自己的演唱声音进行合唱录制,最后再上传平台分享给其他用户。无论是单人还是合唱,观众看到主播们分享的其实都是录制上传的,都不是实时的。

那么在线的KTV是什么样的场景呢?

在线KTV以双人合唱为主,主唱和副唱进行实时的线上合唱,观众可以实时的收听到主唱和副唱的美妙歌声,趣味性和互动性更强。下面这个是即构在线KTV的演示Demo,大家可以下载体验:

在线KTV按角色来分,有主唱、副唱和观众,这个是在线KTV的业务架构图,从图上我们可以看下在线KTV的流程:

图片 4.png

主唱先把伴奏下载到本地,然后通过媒体播放器播放伴奏,再通过麦克风采集自己的演唱声音,同时要把歌词注入到多媒体流中,用以后面的歌词跟伴奏的同步。

副唱拉主唱的流,里面包含了主播的清唱以及伴奏音乐,还有歌词等媒体次要信息。副唱要把自己的音频混入到主唱的声音以及伴奏音乐里面,推送给观众。

观众其实是拉的副唱推出的流,这里面包含了主唱声音、副唱声音和伴奏,实现观众看到听到的主唱声音都是跟歌词同步的。

这里需要注意的是,为了让主唱和副唱之间可以互动,主唱也需要拉副唱的清唱声音,副唱要把清唱的声音推送给主唱,实现主唱和副唱之间的互动,并且伴奏仅存在一次,那就是主唱这边为主。

那么,要实现这样实时互动的在线KTV场景,有哪些技术重点呢?

合唱同步

我们看下面这张图,伴奏的来源是从本地下载,然后通过媒体播放器播放的。人声是歌唱者,从麦克风采集的,那就需要我们的产品能够支持把伴奏的声音和主唱的声音混合再推流出去,并且要保证二者混合是实时的。

图片 5.png

即构SDK支持把媒体播放器播放的伴奏进行混音,录麦克风采集的声音再推流出去,达到人声和伴奏的实时同步。

歌词同步

LRC文件是目前使用最广的一种歌词文件,这种歌词的文件很小很容易解析。在这张图片里,大家可以看到每一行歌词前都有一个时间。我们能将歌词的进度控制到每一行,比如说在第 2 秒的时候,可能显示的是歌曲名称。

图片 6.png

即构SDK支持将非媒体信息注入媒体流中,非媒体信息就包含上面我们说的歌词时间。通过音视频中的SEI帧技术生成媒体次要信息接口sideinfo,让非媒体信息按照指定的时间节点插入到视频帧数据中,在拉流解析时解析到这个视频帧,就可以拉取对应的非媒体信息。

需要注意的是,前面提到的每一行歌词前面有个时间戳,实际上如果要做到精确到每一个字,也是可以实现的,那就需要把每个字都打上时间戳,然后和伴奏进行对齐。

图片 7.png

这个是歌词同步的架构图,大家可以看到客户端A(主唱),通过媒体播放器播放伴奏,从媒体播放器获取当前播放的时间进度,然后再把时间进度塞到视频帧里推流出去,客户端B(观众)去拉主唱的流,里面就包含伴奏声、人声以及包含歌词播放进度时间戳的媒体次要信息,客户端B从拉的流里接收到媒体次要信息,把时间戳提取出来,再根据这个时间戳显示对应的歌词。

原声和伴奏切换

在线KTV的最后一个技术点是人声和伴奏如何切换?大家知道之前的CD都是可以通过切换左声道和右声道来实现只播伴奏或播放伴奏加原声。如果我们媒体播放器要实现通过切换左右声道来进行原声和伴奏的切换,那就需要对音频文件进行处理,实现例如左声道是伴奏,右声道是人声的效果。那么当你只需要伴奏那就只播放左声道,如果需要人声加伴奏,就左声道右声道一起播放。

并且我们还可以进行一些声调或者降调的操作,如果有些演唱者觉得自己的声音跟音乐的音调,它可以对声道进行升Key或降Key的操作,从而实现伴奏和人声的最佳匹配。

二、线上电影配音

《声临其境》是近两年比较火热的综艺,广受大众的喜爱。如果把《声临其境》搬到线上,要如何做呢?

下面是线上电影配音玩法的架构图:

图片 8.png

A配音者和B配音者是需要通过即构实时网络来实现低延迟互动,即构的音视频实时网络可以做到互动延迟在200- 400 毫秒之内,实现配音者之间的无感切换。观众可以选择从即构的实时音视频网络,去拉取 A配音者的声音或者说B配音者的声音,也可以通过混流服务,把A配音者的声音跟B配音者的声音混到一起推给CDN,观众再从CDN进行拉流。

无论是线上电影配音还是线上KTV,对音频质量的要求都比较高。即构的音频处理,支持从16KHz-48KHz全频采集,同时我们对音质会进行降噪、回声消除等前处理。即构支持多个音视频码率,针对不同场景不同网络情况,选择恰当的码率,让音画质与延时、带宽、硬件功耗等实现平衡。

对此,即构语聊房SDK支持娱乐房和开黑房两种模式。娱乐房比较适合高音质场景,最大限度的保留原生的音频品质。开黑房对网络要求比较高,我们降低了码率减少对带宽的占用,保证直播的稳定。

娱乐房

娱乐房分为高音质和超高音质

高音质模式:音频码率在64kbps左右,具有低延时、高并发的特点,适合语聊社交、线上相亲、狼人杀等互动性强的场景;

超高音质模式:音频码率在128kbpa左右,具有低延时、超高音质的特点,适合在线KTV、pia戏、双声道直播、主播电台、线上配音等场景,能够支撑高清音乐的播放。

开黑房

开黑房分为标准音质模式和高清音质模式

标准音质:音频码率在16kbps左右,具有CPU占用低、网速占用低的特点,适合移动网络下多人开黑,超低码率就能保障清晰聊天;

高清音质:音频码率在32kbps左右,具有CPU占用低,高清音质等特点,适合WIFI网络下的多人开黑,保障优质聊天音质的前提下,不影响游戏体验。

三、泛娱乐玩法未来的演变

上面我们介绍了线上KTV和线上电影配音两个新场景,那么在可遇见的未来,泛娱乐行业还可能有哪些新玩法呢?

云手游+语音社交

随着5G的发展,游戏加社交很可能是未来的一大风口。5G下,视频带宽以及码率等都有一个质的飞跃。通过5G网络架构,我们可以实现云手游加语音社交的玩法,云手游的用户不用再去下载安装一个几G的游戏应用,而是可以直接通过浏览器打开一个手游应用,进行云端开黑,加上社交语音功能,实现实时语音互动开黑等。

VR游戏

VR技术也是5G下被广泛看好的应用场景之一,之前由于设备以及带宽限制,VR视频、直播的码率都非常大。5G普及后,VR游戏可能会有更广阔的应用。我们可以借助VR,沉浸于虚拟世界里面,再加上语音聊天,增加更丰富真实的社交玩法,就可以实现VR版的模拟人生游戏。身在家中,却能与世界各地的玩家仿佛置身同一个游戏场景互动。

以上就是第二期泛娱乐行业新玩法的主要分享内容,音视频技术的发展让泛娱乐社交不断衍生出新玩法,极大的丰富了我们的日常生活。随着5G、AR/VR技术的普及应用,未来泛娱乐社交行业还将出现哪些新生态,我们拭目以待。

免责声明:“站长之家”的传媒资讯页面文章、图片、音频、视频等稿件均为自媒体人、第三方机构发布或转载。如稿件涉及版权等问题,请与我们联系删除或处理。稿件内容仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性,更不对您的投资构成建议。我们不鼓励任何形式的投资行为、购买使用行为。

  • 相关推荐
  • 大家在看
  • 牵手王一博、做泛娱乐矩阵,找到Z世代刚需的喜马拉雅

    作为国内创立最早、内容与业务最为齐全的音频平台之一,喜马拉雅目前已有超过 6 亿用户,国民度相当高。像硬糖君的爸妈,智能手机不一定能百分百玩转,但在喜马拉雅上找东西听的操作,那还是很纯熟的。

  • Zenlayer助力即构科技提升用户实时互动体验,为新兴市场打call

    艾瑞咨询报告显示,随着移动互联网的发展, 2018 年全球互联网通信云PaaS市场规模已达到15. 6 亿美元,且保持30%左右的年增长率,除中国大陆以外,东南亚、中东、非洲、拉美等新兴市场成为蓝海。顺应中国企业出海需求,借助日趋完善的全球网络基础设施及优质的国际网络服务商,通信云的业务版图正向全球市场扩张,其中音视频厂商在新兴市场的覆盖成为考验通信云全球服务能力的关键因素。国际领先的音视频服务商即构科技(ZEGO)通过Z

  • “欢乐行01杨蕴”综合领域排行榜,百家号分类应该怎么选

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。欢乐行01杨蕴是当前百家号中的普通号,目前账号百家号权重为0,综合排名位列1035589名,综合分类排名位列46138名,领先了7.3%的百家号。 欢乐行01杨蕴百家号概况 欢乐行01杨蕴的简介为在所有你看到或看不到的地你。,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过17篇的游戏内容,?

  • 美术生福音 中国美术考学联盟“伯乐行动”8000补贴潜力美术生

    2020 年是一个很特殊的一年,对于各行各业都有不小的影响,其中也包括了即将面临艺考的艺术生们,为什么这么说呢?作为美术生,集训几乎是必不可少的一项,但是并不便宜的集训费用,在这一年成为了很多美术生家庭的一项压力不小的开支,家庭经济情况一定比以往的任何一年都紧张。作为家长,挣钱都是为了孩子,希望自己的孩子可以得到最好的教育,不想自己的孩子因为钱的原因输给别人家的孩子,但是今年的特殊情况,却让很多家庭的经

  • “恰恰娱乐”百家号娱乐领域排行,新作者选择哪个领域好?

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。恰恰娱乐是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列363696名,娱乐分类排名位列99533名,领先了67.4%的百家号。 恰恰娱乐百家号概况 恰恰娱乐的简介为娱乐新闻,每天播报,欢迎观看,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过57篇的游戏内容,最近该作者创?

  • 和平精英娱乐模式什么时候开放 娱乐模式开启时间

    ​和平精英的娱乐模式很多玩家还不知道要什么时候才会开放,下面就来为大家分享一下本次娱乐模式的详细时间安排。

  • “娱乐speak”百家号娱乐领域排行,新作者选择哪个领域好?

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。娱乐speak是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列772037名,娱乐分类排名位列198441名,领先了30.9%的百家号。 娱乐speak百家号概况 娱乐speak的简介为希望大家能够喜欢支持我的作品!,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过10篇的游戏内容,最近该?

  • “娱乐很健康”百家号娱乐领域排行,新作者选择哪个领域好?

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。娱乐很健康是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列555780名,娱乐分类排名位列151560名,领先了50.2%的百家号。 娱乐很健康百家号概况 娱乐很健康的简介为娱乐很健康:只是为博君一笑,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过588篇的游戏内容,最近该?

  • “娱乐尽兴”娱乐领域排行榜,百家号分类应该怎么选

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。娱乐尽兴是当前百家号中的普通号,目前账号百家号权重为1,综合排名位列922922名,娱乐分类排名位列225964名,领先了17.4%的百家号。 娱乐尽兴百家号概况 娱乐尽兴的简介为呵护女人从这里开始。,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过4篇的游戏内容,最近该作者创作的文章?

  • “我在解说娱乐”百家号娱乐领域排行,新作者选择哪个领域好?

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。我在解说娱乐是当前百家号中的普通号,目前账号百家号权重为1,综合排名位列958903名,娱乐分类排名位列231803名,领先了14.2%的百家号。 我在解说娱乐百家号概况 我在解说娱乐的简介为回忆总想哭,一个人太孤独,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过0篇的游戏内容,最近?

  • 美术生,你有实力拿下这笔补贴吗 中国美术考学协会“伯乐行动”8000万补贴潜力美术生

    中国美术考学协会“伯乐行动”的补贴美术生的活动是真的么?最近大家都被这条消息刷屏了。许多美术生都跃跃欲试,但是又害怕上当受骗,天下怎么会掉馅饼呢?天下当然不会掉馅饼,因为这个是要靠实力拿下的补贴。如果你有这样的实力,就能拿到补贴,为家里省下一步不小的开支。众所周知今天是特殊的一年,因为疫情,各行各业都受到了不小的冲击,其中也包括美术生的父母,大家都知道一个家庭培养一个美术生,成本是相当高的。有很多声

  • “娱乐探索乐园”娱乐领域排行榜,百家号分类应该怎么选

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。娱乐探索乐园是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列171441名,娱乐分类排名位列43498名,领先了84.7%的百家号。 娱乐探索乐园百家号概况 娱乐探索乐园的简介为专注于娱乐圈中的大小事件,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过6篇的游戏内容,最近该

  • “佳益娱乐”百家号娱乐领域排行,新作者选择哪个领域好?

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。佳益娱乐是当前百家号中的普通号,目前账号百家号权重为1,综合排名位列954225名,娱乐分类排名位列230996名,领先了14.6%的百家号。 佳益娱乐百家号概况 佳益娱乐的简介为专注最新的娱乐资讯,娱乐快报,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过3篇的游戏内容,最近该作者创?

  • “阿蕊讲娱乐”娱乐领域排行榜,百家号分类应该怎么选

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。阿蕊讲娱乐是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列405481名,娱乐分类排名位列111068名,领先了63.7%的百家号。 阿蕊讲娱乐百家号概况 阿蕊讲娱乐的简介为为您更新最新的娱乐资讯,明星动态,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过728篇的游戏内容,?

  • “阿彬娱乐社”娱乐领域排行榜,百家号分类应该怎么选

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。阿彬娱乐社是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列913242名,娱乐分类排名位列224091名,领先了18.2%的百家号。 阿彬娱乐社百家号概况 阿彬娱乐社的简介为感谢大家关注,阿彬娱乐社!,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过3篇的游戏内容,最近该作?

  • “娱乐评道”百家号娱乐领域排行,新作者选择哪个领域好?

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。娱乐评道是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列590420名,娱乐分类排名位列160115名,领先了47.1%的百家号。 娱乐评道百家号概况 娱乐评道的简介为看世间百态 品百味人生,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过12篇的游戏内容,最近该作者创作的文?

  • “妮子分享娱乐”娱乐领域排行榜,百家号分类应该怎么选

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。妮子分享娱乐是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列575838名,娱乐分类排名位列156494名,领先了48.5%的百家号。 妮子分享娱乐百家号概况 妮子分享娱乐的简介为每天跟大家分享最新娱乐看点,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过24篇的游戏内容,最

  • “娱乐欣赏秀”娱乐领域排行榜,百家号分类应该怎么选

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。娱乐欣赏秀是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列475270名,娱乐分类排名位列130088名,领先了57.5%的百家号。 娱乐欣赏秀百家号概况 娱乐欣赏秀的简介为边走边欣赏,娱乐新闻嗨不停,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过444篇的游戏内容,最近该?

  • “星点看娱乐”百家号娱乐领域排行,新作者选择哪个领域好?

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。星点看娱乐是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列167338名,娱乐分类排名位列42174名,领先了85.0%的百家号。 星点看娱乐百家号概况 星点看娱乐的简介为一剧成名而后大火,星点分享成名大作,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过25篇的游戏内容,?

  • “FUN范儿娱乐”百家号娱乐领域排行,新作者选择哪个领域好?

    备注:本文数据来自站长之家移动传媒平台,文章涉及的数据依托平台大数据计算所得,非百度官方数据,仅供参考。FUN范儿娱乐是当前百家号中的普通号,目前账号百家号权重为2,综合排名位列309239名,娱乐分类排名位列84598名,领先了72.3%的百家号。 FUN范儿娱乐百家号概况 FUN范儿娱乐的简介为时尚娱乐、明星绯闻、八卦新闻、娱乐花边,是一家主旨明确、领域专注的自媒体作者,截止目前为止他们已经在百家号上发布了超过20篇的游戏

  • 参与评论
文明上网理性发言,请遵守新闻评论服务协议