自如回应“租客喝了7个月中水”:已修复,将沟通补偿方案 台风“海神”逐步北上 后期或将影响东北 快手8.0版本上线!品牌与产品全面升级 支持1080P视频上传和播放 200余名防疫人员为服贸会做现场保障 参会人员配发中药预防饮 【地评线】京彩好评:更新技术出口目录是应时应势之举 2020年服贸会9月4日开幕:参展企业数量超往年 个人可提前两天预约参观 最新数据持续向好引海外点赞中国经济复苏 全国消费扶贫月:农产品流通过程中的税收优惠政策了解一下 徐州三十一中女教师殴打辱骂多名学生 已被停职 塑料书皮真“有毒”吗?哪种最安全?听专家怎么说 正当防卫认定新规来了,5张图带你看明白! 阿达来提·艾再孜:民法典将护佑“全面小康”行稳致远 【桂声漫画】防疫学业两手抓——大学,我来了! 我国成为3月份以来全球主要服务贸易国中唯一出口增长国家 中央财政对受灾困难群体予以倾斜和优先保障 防汛救灾工作有力有序 王毅:维护南海稳定,携手化解挑战 【地评线】京彩好评:更新技术出口目录是应时应势之举 中国改革低保等现行社会救助制度 打造多层次分类救助体系 疫情之下“审判执行不停摆” 中国最高法要求确保完成全年审判执行任务 商务部:愿与日本深化防疫和经济社会发展合作 中方再驳蓬佩奥涉华无端指责:蓬佩奥之流的险恶用心早已被世人识破 2020年服贸会9月4日开幕 设置7类活动 东北抗联遗址“云展播” 感受传承历史培育家国情怀 木里矿区非法开采为镜鉴 青海层层出手宣示生态保护决心 昨天,今天!胜利,唯有胜利! 中国创新发展目标明确 在人工智能和先进制造业等方面有规划 世界旅游合作与发展大会将在京开幕 促旅游业再繁荣 美国国务院限制中国在美外交活动 外交部回应 商务部回应印度禁用中国118款APP:严重关切 坚决反对 北京开展有限空间专项执法检查 持续至9月11日 中央财政对受灾困难群体予以倾斜和优先保障 防汛救灾工作有力有序 云南省原副省长赵廷光逝世 享年89岁 应急管理部消防救援局前方指挥部完成各项任务正式撤离四川 男童泳池排便被索赔1.5万元 家长回应:不接受赔偿数额 商务部:调整发布《中国禁止出口限制出口技术目录》不针对具体企业 宇宙全尺度暗晕什么模样?8个“放大镜”接力模拟出清晰图像 250万贫困人口遭受洪涝灾害 官方紧急施措防范因灾返贫致贫 西银高铁陕西段联调联试正式启动 应急管理部自然灾害工程救援成都基地挂牌成立 跨境服务贸易负面清单何时推出?商务部:年底前将出台 内蒙古推荐50项国家重点研发计划项目获国家立项支持 “日军细菌战罪证”上线,让历史说话! 中方回应美方限制中国在美外交活动:于法无据、于理不合、于情不通 疫情阴霾渐散 外媒感受“中国式”热闹 实验室设计、人员培训……中国抗疫医疗专家组在几内亚分享这些经验 中科院科研人员在新型半导体激光器研发上取得进展 王毅将出席金砖国家外长视频会晤 三部门:防卫过当应兼具两个条件,缺一不可 5G手机首次击穿千元关口 上游芯片厂商芯片迭代速度加快 二战以来首次!CBO:美国政府债务明年将超过经济规模
您的位置:首页 >数码 >

5G对音频的赋能到底是怎么发生的?

2019-08-21 15:04:10来源:亿欧

“5G来了,你最盼望的应用是什么?”

如果拿这个问题去询问大部分手机用户,相信收获的答案会是高清直播、VR、云游戏等等。应该近乎没人会说,“5G来了,会让我听音乐更爽”。

确实,5G提高带宽降低时延,基本指向于网络能够支撑更好画质,于是无论视频、游戏还是AR、VR,都把5G牢牢和视觉困在了一起。

那么5G网络的升级,真的就跟听觉一点关系都没有吗?换言之,今天智能手机以及个人硬件里,关于“听”的那一部分是不是已经走到了尽头?

其实未必,5G虽然与视觉紧密相关,但它能给声音带来的东西也不算少数。今天我们从几个方向展示一下,5G对音频的赋能到底是怎么发生的。

高音质与低时延:5G特性下的声音

首先能够给声音带来改变的,依旧是5G的基础特性:大带宽与低时延。

沿着这两条轨迹,我们会发现现有声音传输还是有较大空间来进行优化。在4G网络环境下,我们习惯了随时在线收听音乐、音频节目,甚至观看直播,但其基本是建立在音质经过较大幅度压缩基础上的。而当网络传输速率达到10Gbps左右的时候,高清音质也可以通过网络快速传输,保证实时化共享。另一方面,5G网络的低时延特性也给声音带来了新的可能,比如多声源同步问题可以得到比较妥善的解决。

把这些5G特性落到应用场景里,我们可以比较简单地看到,三个方面的5G+声音能力将被打开。随之而来是一些新玩法可能被挖掘。

一、高清、高品质音乐的在线化。

我们知道,一些高质量音乐在手机段很难复现,一方面是由于扬声环境有限,另一方面也是因为网络环境限制,导致质量较大的音频文件很难传输。5G直接带来的改变,是高品质音乐和音频节目具有更高的实现性。这个特性可能打开的应用,不仅于音乐一项。很多对于音质细节具有高要求的音频内容,比如环境音、催眠音效、白噪音等等也可以获得更好的输出效果。比如用声音来触发大脑舒适感的ASMR,一直以来其圈内都强调专用收音设备的等级。而高等级收音同时也需要大带宽网络的辅助,才能最终让用户体验到最终效果,5G到来或许是类似领域的一个契机。

二、让声音在5G中互动。

5G的另一个特性是低时延,这意味着不同音源的声音可以更好组成统一体。这一点应用在在线音频中,可以很好解决几个终端同步收音合奏的效果。今天的直播界,也经常会搞一些对唱和声之类的玩法,但质量很难跟现场音乐相提并论。尤其乐器合奏,近乎于是无法在4G网络环境下达成很好效果的。

5G网络的特性,可以让异地音乐排练变为可能。而对商业形态的最直接影响在于,5G网络或许可以让不同地域的歌手乐手完成高品质的合奏玩法,换言之就是网上音乐会成为可能。在今天直播与音频节目盛行的环境下,类似玩法应该会有比较好的表现。

三、更好的声画同步效果。

音频当然不止于自身,更多情况下它需要与视频合作。5G网络的低时延特性,一个可能性在于能够升级VR、游戏等环境下的声画同步体验,让声音更好与视觉配合。这个体验最直接的商业想象力在于互动视频,更复杂可交互的音效,是互动视频体验升级的核心路径之一。

声音漂移:IoT环境下无处不在的声音

更多时候,5G不能被看作一个单独的技术路径,而是必须与更多技术突破相结合,提供网络方面的助力。对于声音来说,这样的“5G+”赋能也同样存在。

比如我们知道,大量生活场景里的IoT设备,都趋向于取消按键和触屏,而是用智能语音交互作为主要控制入口。

这也意味着,大量家庭生活与车载场景里的IoT设备,都将携带发声设备。那么在5G环境下,这些设备将获得更好的联接效果与硬件虚拟化能力。声音也就可以在这些设备之间更好传输。

或许不久的未来,我们可以期待这样的场景:客厅中用电视追剧的你,要起身去运动,然后去厨房搞点吃的。在执行这个非常符合减肥需求的行动同时,你并不想停止追剧,至少也要听个声音。那么你可以把电视的声音扔到运动耳机上,运动之后再把耳机的声音扔到厨房的音箱,或者干脆扔到冰箱、燃气灶上……

IoT体系下的声音无缝体验,并不仅仅意味着用户可以指挥声音到处游走,同时也意味着设备对用户声音的识别、理解与交互能力。每个设备和用户说过什么话,学习到了什么东西,都需要体系化共享与再学习,这都需要建立在强大网络环境上。5G和wifi6,目前看来是这一能力的网络基础基石。

IoT必须拥有更多能力,而声音正是其中之一。

算法即声音:AI+5G赋能音频

或许关注AI领域的朋友有这样一个感觉,新闻里的AI语音能力越来越神奇,什么声音克隆、情绪识别、机器对话,都非常强力。但落到自己的手机和音箱上,总感觉有点傻傻的?

这里面有一个核心问题,就是算力和网络环境不达标,庞大的深度学习模型没法在现有条件下跑在终端设备上。虽然类似问题出现在机器视觉领域更多,但随着这两年语音模型飞速发展,算力和网络能力不足,优秀算法不能落到用户终端的问题,也开始出现在了语音领域。

所以5G给音频的赋能,另一个想象力在于跟AI结合。

未来,我们听见的机器声音和其他人传递过来的音频,很有可能已经经过了大量算法“美化”。声音界更具欺诈性的“乔碧萝殿下”可谓指日可待。

相对需要5G网络加持的语音算法应用,包括机器音的实时美化和情绪修饰、声音克隆、多模态语义理解等等。另一方面,在5G网络下,AI也将有条件更好理解用户的声音,并从中产生更多玩法和商业化价值。

5G即将到来,升级网络环境和众多新网络特性,对于各产业都将带来不同的升级效果。对于内容创作者来说,5G是新的画板。无论你的创作载体是声音、视频、游戏,或者想象中的其他形式,5G都是一个新的机遇。


活动推荐:WRC2019世界机器人大会-大湾区机器人生态协同发展论坛

机器人被誉为“制造业皇冠的明珠”,作为机器人产业聚集地的大湾区,利用高新技术、高效资本等优势,推动了我国机器人事业前进,备受全国瞩目。为了洞悉机器人发展态势,促进大湾区机器人产业融合共生,2019年08月22日下午,在北京市人民政府、工业与信息化部和中国科学技术协会等机构指导下,由亿欧公司主办的大湾区机器人生态协同发展论坛,将以“融合共生·迭代加速”为主题,在北京市亦创国际会展中心拉开序幕。在本次大会中,业界大咖将聚焦机器人的新技术、新场景、新资本和新模式等亮点,发表主题演讲并进行圆桌讨论,深入解读大湾区生态环境,从“新”定义大湾区机器人,共同探讨大湾区机器人的创新融合发展之道。

1360x408.jpg

猜您喜欢