您的位置:首页 > IT热点资讯

单田芳TTS专辑播放量破亿,喜马拉雅AIGC让内容生产提效

发布时间:2023-01-05 15:38:56  来源:互联网     背景:

近日,喜马拉雅用单田芳AI合成音所制作的TTS(语音合成)专辑总播放量破亿,这标志着喜马拉雅在现有的“UGC + PGC + PUGC”内容生态之外,已经通过AIGC探索出内容生产的更多可能性。

据悉,喜马拉雅“单田芳声音重现”等账号下上线的运用单田芳AI合成音所制作的专辑数量已经有 100 多张,总播放量超过 1 亿。其中,有 15 张专辑播放量破百万,例如,《民国四大家族》播放量近 730 万,《十二金钱镖》播放量近 700 万,《卧虎藏龙全集》播放量超 390 万。

通过行业领先的TTS技术,喜马拉雅用AIGC引领长音频行业的内容生产变革,让内容生产提效。与此同时,喜马拉雅还通过多项语音技术的加持,进一步提升用户的内容消费体验。

TTS技术完美复现单式评书

特斯拉回应刹车失灵

去年 9 月,在北京单田芳艺术传播有限责任公司授权下,喜马拉雅用TTS技术完美还原已逝的单田芳先生的声音,并首 次将单田芳先生的AI合成音全新演绎听众耳熟能详的经典之作。

为了能最 大程度保留单老那苍劲、沙哑的独特嗓音以及情感充沛的评书腔调,喜马拉雅智能语音实验室对单田芳先生声音进行潜心探索和研发,通过自主设计单独的韵律提取模块,并将其融入到 HiTTS 技术框架中,不仅完美复现了单老苍劲、沙哑的“云遮月”式独特嗓音,就连他那情感充沛、起伏跌宕的腔调也一并保留了下来,让单老的AI合成音仿佛本尊再现。单田芳先生之子单瑞林也评价表示,“听到TTS声音,心魂间猛然一阵,仿佛父亲又回到这个世界。”

马斯克机器人编程

喜马拉雅已在TTS领域潜心钻研多年,并专门成立喜马拉雅智能语音实验室,长期专注于语音合成、识别、语音信号处理、编解码以及智能音效的研究和开发。喜马拉雅智能语音实验室的卢恒博士表示,针对小说的TTS系统和音色选取是喜马拉雅TTS的亮点与特色。用真实自然的TTS音色演绎有声小说是非常难的,不同于普通的文字转语音,用TTS音色演绎小说需要学习小说中的抑扬顿挫、情感表达、上下文关系,区分旁白和对白,并最终将作品完美演绎出来。“喜马拉雅在这方面有着天然的优势。在音频赛道耕耘多年后,喜马拉雅已经聚集了海量有声书内容和众多优 秀主播。喜马拉雅智能语音实验室尝试用各式的声音来表达不同的情感、题材和频道,因而就有了更大的试验和发挥空间。”

卢恒博士介绍,喜马拉雅自研的TTS前端文本处理分析模块已经能够高精度、全自动地对文本进行多音字识别、韵律预测和风格分类,并已开发出可以实现多情感、多风格、多语种声音的TTS技术模型,不仅可以演绎不同情绪的文字,还可以自动区分旁白、对白,并支持英文,极大地丰富了TTS能表达的情感和韵律。

目前,喜马拉雅已申请了 20 多项语音技术相关专利,其中有 10 多项TTS语音合成相关专利。 今年,还有两项语音技术成果先后被世界顶 尖学术会议“ 2022 年IEEE国际音频、语音与信号处理会议”收录,展现了喜马拉雅强大的语音技术实力。

AIGC助力内容生产提效

通过行业领先的TTS技术,喜马拉雅成为音频领域AIGC的先行者。除了评书,喜马拉雅多情感、多风格、多语种声音的TTS技术模型已经广泛被运用于新闻、小说、财经专辑等多种内容的制作中。喜马拉雅签约和制作了不同的TTS音色,来适配不同的内容、满足用户多样的需求。

例如,喜马拉雅原创TTS音色“喜晓峰”和“枪枪”已被应用于《听秦说》《 36 氪·氪金大事件》《海清评财经|股票、债券及基金投资的一线参谋》等财经专辑内容中。其中,“秦朔朋友圈”账号下《听秦说》专辑过去更新频率为每周一次,但在采用喜马拉雅TTS技术后,开始每日更新。

“秦朔朋友圈”发起人、中国商业文明研究中心联席主任、及《听秦说》主播秦朔表示,过去没有使用喜马拉雅TTS技术时,需要真人录制专辑内容,耗时长,更新频率低,而使用TTS技术后,内容生产效率大幅提升,可以让“秦朔朋友圈”的文章即时音频更新,轻轻松松便实现了日更,专辑的播放量和互动数据都显著提升。

除此之外,新京报、环球时报、潇湘晨报、时代周报、海外网、刺猬公社等数十家媒体也通过喜马拉雅多种标准普通话男声和女声的TTS音色上线了超过 40 张TTS专辑。

今年,喜马拉雅基于自研的TTS框架,采集头部主播“喜道公子”的真声打造的AI主播“喜小道”,与AI续写应用“彩云小梦”合作,打造了首 个从故事创作到演播均由AI完成的AI电台。

AIGC不仅助力喜马拉雅和内容创作者实现内容生产提效,推动创作者布局音频,实现转型升级,也给用户带来更丰富的内容。

AI技术助力内容体验增值

与此同时,喜马拉雅也通过TTS、ASR、语音信号处理算等多种AI技术进一步提升用户的内容消费体验。

目前,喜马拉雅已经与近百家网络平台和出版机构合作上线近 6 万本电子书,而TTS技术能为这些电子书实时生成TTS声音,让用户可以边听边看,从而为用户带来“听看一体”的内容服务。

近期,喜马拉雅又利用行业领先的自动语音识别技术(ASR)以及对齐算法,上线了全新版本的AI文稿功能,用户在收听喜马拉雅音频内容的时候,也可以在收听页面同步阅读相应的文字内容,享受“边听边看”、“听看一体“的内容消费体验。

全新上线的AI文稿功能,能有效识别无文稿声音内容,为其自动生成文稿;对于已经有原始文稿的声音内容,则采用超长音频与文本的对齐技术,将声音与文稿进行时间戳对轨,从而在声音播放的同时,对相应文字进行同步高亮,实现声字同步,让用户能更便捷地享受边听边看的内容消费体验。这不仅进一步提升用户体验,有利于增强用户粘性,也使用户能够在不同场景中,自由切换听和看两种形式,畅享喜马拉雅平台上的丰富内容,进一步拓展了喜马拉雅的多元化使用场景。

华为用京东方屏幕的手机有哪些

喜马拉雅还通过语音信号处理算法(SSP)率先在长音频领域带来智能音效,推出超重低音、剧院混响、清澈人声三种喜马拉雅专属音效,让用户可以为不同内容匹配不同音效,享受更加优质的收听体验。接下来,喜马拉雅将上线更多的专属音效,为用户提供更加多样的收听选择。

喜马拉雅作为深受用户喜爱的在线音频平台,始终坚持以科技赋能文化。未来,喜马拉雅将继续让技术赋能创作者、服务用户,让内容生产提效,让内容体验增值,用技术加持声音、用声音服务生活。


返回网站首页

本文评论
中国首次实现液体火箭发动机重复使用「中国可重复使用火箭发动机」
图片来源:视觉中国  记者 | 马悦然华为android10适配机型  在火箭回收重复利用上,中国又前进了一步。  9月13日,西安航天动力研究所官微称,近日,由西安航天动力研究所自主...
日期:09-20
NVIDIA推送473.81显卡驱动:为Win7/8量身打造_显卡驱动466.77
今天,NVIDIA专门为Win7和Win8系统推送了新的473.81显卡驱动更新。与此前为老系统定制的驱动更新一样,473.81更新同样不支持新功能与游戏相关的修复,而仅包含新的安全补丁。如果...
日期:08-04
罗永浩卸任锤子科技集团总经理,退出集团法人「罗永浩还是锤子的法人」
  讯 9月28日下午消息,企查查App显示,近日,成都锤子科技集团有限公司发生工商变更,罗永浩卸任执行董事兼总经理、法定代表人职务,由管志良接任。企查查信息显示,成都锤子科技集...
日期:09-30
iPhone 14出现大幅降价 Plus最多直降700元「iphone14会涨价吗」
中关村在线消息:相比往年的iPhone系列,今年的iPhone 14系列可以说是让用户们又爱又恨。相比升级点多,获得果粉欢迎的Pro系列,iPhone 14标准版、Plus版就没那么好卖了,这两款机型...
日期:10-16
华为P50等大批神机在列!鸿蒙HarmonyOS 3首批正式版将于10月中下旬推送「直播:华为鸿蒙发布会p50」
据悉,华为宣布鸿蒙 HarmonyOS 3 正式版首批将于10 月中下旬推送,昨日HarmonyOS官微公布了升级预告。10 月中下旬正式版预告:iphone13免税后多少钱华为 P50、华为 P50 Pro、华为...
日期:10-15
酷狗音乐与三大音乐厂牌联合推出新年歌单,以精彩音乐开启新年狂欢
2023 年已经拉开序幕,新的征程即将起航。近日,酷狗音乐“新年音乐派对·歌单征集计划”活动正式上线,不仅有音效歌单征集活动、酷狗耳机和周边玩偶新年礼物等你来解锁,更有华纳...
日期:01-05
CEO库克:要来苹果公司工作需要这4个特质「库克为什么能成为苹果的ceo」
  IT之家10月9日消息,9月底,苹果CEO Tim Cook(蒂姆库克)在欧洲进行了访问,并且获得了Università DegliStudidi Napoli FedericoII(那不勒斯费德里科二世大学)创新和国际管理硕士...
日期:10-28
华为mate50是5g吗_被加价8千 Mate 50系列不支持5G仍被抢光:用户不介意 华为称4G更成熟
很显然,Mate 50系列上市后就被抢疯,这是华为希望看到的,而对于用户而言,Mate系列缺席了两年,不少老用户换机也是必然的事情。尽管华为Mate 50系列不支持5G,但其首销当日,线上平台出...
日期:09-29
让折叠屏变成你的随身电脑,看三星Fold4玩转移动办公新体验_三星fold 折叠怎么样
随着移动办公的常态化,职场人士手里动辄超过1kg的笔记本,在这个时候就显得比较笨重。在折叠屏手机推出之后,这种内外折叠形态的折叠屏手机渐渐进入到职场人士的视野中。其中,新...
日期:09-13
网络机顶盒哪个好?老司机分享网络机顶盒名单_十大网络机顶盒
今日来,不少网友咨询我关于网络机顶盒哪个好,购买时应该注意哪些事项,作为数码产品老司机,陈辉自己也经营了一家小小的实体店,在推荐产品这一块颇有心得。关于网络机顶盒哪个好,今...
日期:10-01
刘强东明州案双方以和解终结_明州事件是谁要搞刘强东
oppo findx3和x5使用感受  文/雷婧姝搭载三星exynos2100的手机  刘强东明州案迎来意外转折,北美时间10月1日晚间双方律师团队发表联合声明,声明显示案件双方已经达成和解,...
日期:10-03
分析师数据显示iPhone 14 Pro系列发货时间有缩短 但仍超过30天「iphone12pro放货时间」
10月10日消息,据国外媒体报道,苹果公司9月8日凌晨推出、次日晚8点开始接受预订、16日开始发货的iPhone 14系列智能手机,已进入了接受预购的第5周,升级明显的两款Pro版,市场需求依...
日期:10-14
中国首款!“万辆赴欧”!这一“中国车”,在全球80多个国家上市→
  来源:央视财经  昨天(13日),国内最大批量纯电动汽车在上海海通码头装船起运,出口欧洲市场。vivo z5颜色  这次出口欧洲市场的是上汽集团定位全球市场的纯电动汽车,数量为...
日期:09-15
SpaceX想为iPhone提供服务 马斯克:谈判蛮有希望_马斯克和中国共享spacex技术
  讯 北京时间9月9日消息,马斯克透露说,SpaceX已经与苹果谈判,考虑将星链卫星服务引入iPhone 14,为新增加的SOS功能提供支持,谈判蛮有希望。  马斯克发推称:“关于星链连接,我...
日期:09-09
华为卫星通信专利获授权!Mate 50将搭载「华为合作卫星」
近日,华为技术有限公司申请的“卫星通信的方法和装置”专利已获授权,专利摘要显示,该方法能够在提高通信性能的前提下,降低终端设备的能耗和通信复杂度。今天,余承东发消息称,华为...
日期:09-03
苹果或取消10月发布会:新款iPad、MacBook Pro将直接开卖「苹果今年会发布新ipad吗」
按照以往惯例,苹果在秋季发布会上推出新iPhone等产品之后,还会在10月份举办一场特别活动,推出新款iPad、MacBook Pro等新品。不过根据名记Mark Gurman的最新消息,苹果今年将不会...
日期:09-26
谷歌确认:将在安卓14中引入对卫星连接功能的支持
  IT之家9月2日消息,天风国际分析师郭明錤于8月29日表示,苹果确实在为iPhone14/Pro系列开发卫星通信,并在量产前完成了该功能的硬件测试。此外,华为Mate50/Pro系列新机也可能...
日期:09-02
PC/手机双平台通吃!米哈游新作《绝区零》首测正式开服
今天上午10点整,米哈游新作《绝区零》官方发文宣布,首次小规模删档封闭性测试调律测试”正式开启。此次测试面向支持PC和iOS双平台用户,安卓平台因为适配问题无奈缺席,将在后续...
日期:08-06
小米集团雷军:迷茫动摇甚至放弃是创业过程中的必修课_小米创业之初
乔布斯与苹果公司案例分析  新京报贝壳财经讯(记者孙文轩 宋美璐)“我非常激动,有幸见证了年轻的创业者在这里收获荣誉,点燃理想,开启新的创业历程。”8月26日晚,HICOOL2022全球...
日期:08-28
1.9亿像素手机_全球2亿像素手机发布!起售价3499元
8月11日消息,今天摩托罗拉举行了新品发布会,会上发布了多款新品,其中搭载全球首款2亿像素摄像头的moto X30 Pro手机惹人注目。搭载全新骁龙 8+处理器,首发价3499元。目前已经上...
日期:08-13