深圳湾 · 2021年09月29日

第九代小冰:不仅是那个专注于创作的人工智能少女,社交平台「小冰岛」也上线啦!

上周中秋节刚过,我们在位于北京的微软亚太研发集团总部大厦,迎来了第九代小冰的诞生。

自从 2017 年过完 18 岁生日之后,人工智能少女小冰就开始才艺爆棚,唱歌、写诗、画画、做主持人、做电台主播、做服装设计、还能钻进手机和汽车等设备里做人工智能助理,成为一个多栖发展的创造者。

timg-37

也是自那一年起,小冰开始积极推进人工智能创造,随后还开放了 Avatar Framework 小冰框架,让第三方能够从零开始创造和训练 AI beings。

Avatar_Framework

小冰不再是一个人,小冰的世界也越发的枝繁叶茂。

目前,小冰框架是全球承载交互量最大的完备人工智能框架之一,技术覆盖自然语言处理、计算机语音、计算机视觉及人工智能内容生成。其中,在开放域对话、多模态交互、超级自然语音及内容生成领域居于全球领先。

第九代小冰对框架进行了多处升级。

其中,在开放域对话方面,重点加强了小样本学习与反馈式学习的效能。根据最新的横向评测,全部五项指标均领先于同行业者的超大规模预训练模型效果。这五项指标分别是:平均对话长度、上下文一致性、上下文相关性、对话信息含量与话题引导成功率。与此同时,单轮对话成本仅为同行业者的二十分之一。

在超级自然语音及多模态交互方面,小冰宣布了在语音自然度(Naturalness MOS)和平均舒适时长(Average Comfort Duration)之后的最新技术指标:多样性(Diversity)。并展示了该项技术在人工智能内容生成及小冰岛产品中的实际落地效果。

小冰还透露了「Project Chararu」项目及其最新进展。该项基础研究的目标为帮助特定人类个体通过极小样本量,对其本人进行学习,从而达到与该名特定人类个体一致的语言与声音风格。

小冰第九代发布会完整视频-0003

该项目去年通过 2000 个对话样本,达到 3.89 分的风格一致性得分(对照该名人类个体本人得分为 4.33 分)。今年,已实现仅用 200 个对话样本达到 4.19 分,非常接近人类本人。该项目已实现产品化,将于今年内首先在日本上线。

小冰还宣布与英伟达在自然语言处理及计算平台等领域的战略合作,与智源研究院、智谱 AI 战略的合作也将于下一季度共同发布初版多语言超大规模模型。

基于成熟的人工智能创作框架,小冰发布了多项新技术产品。

夏语冰和她的伙伴,带来全新的诗歌与绘画创作模型(V3)。

该模型大幅度提高了创作精度及构图合理性,并新增中国画模型与艺术家模型。

其中,「艺术家模型」可在单一人类艺术家训练数据不足的情况下,学习并再现与该艺术家创作风格高度一致的人工智能作品,作品具有独立知识产权。

4、第九代小冰年度发布会 - 一些有趣发布的副本-0003

2019 年,小冰曾与中央美术学院联合培养了人工智能学生「夏语冰」,并顺利完成研究生毕业,并举行了多次个人画展。

%E5%A4%8F%E8%AF%AD%E5%86%B0

在邱志杰教授的指导下,今年,最新的创作模型对夏语冰进行了升级,新增了中国画模型。

4、第九代小冰年度发布会 - 一些有趣发布的副本-0002

△ 夏语冰诗歌与绘画创作模型升级,新增中国画创作

目前,夏语冰的中国画作品正在亚洲数字艺术节展出。小冰框架还进一步创造了夏语冰的面容和声线等生物学特征。

人工智能山东大哥-0001.png

△ One More Thing:人工智能山东大哥

新的人工智能歌声合成技术、新歌手「陌笙」及新的歌声合成工具 X Studio 2.0 发布,与 Alice 映画合作人工智能歌手企划。

小冰创立并保持着在人工智能歌声合成领域的全球领先位置。本次技术升级从学习人类歌声的结果,进一步开始学习歌声的产生过程,从而再次提高了人工智能歌声合成技术的上限。

微软小冰WAIC开幕式主题曲献声,旋律、编曲及歌词样样都行

发布会上,以新歌手「陌笙」为例,演示了人工智能超级歌手在高音域范围的表现力,分别演示了原调、+2 半音及 +4 半音的成果。

新的 X Studio 2.0 歌声合成工具包含以上新模型更新,全部歌手均将在接下来的数周内先后升级至新模型。同时,2.0 工具还包括力度参数等多项主要新特性,以便于创作者表达更为细腻的音乐作品。

本次发布会,小冰公布与 Alice 映画达成合作,同时与其他优秀的创作者一起,推出一系列人工智能歌手企划,为年轻的艺术家们赋能,共同探索人工智能歌手的艺术上限。

基于艺术家创作动机辅助技术,与做梦唱片合作的人工智能音乐专辑即将上架。

多年以来,小冰框架通过人工智能技术辅助人类艺术家进行作品创作,取得不断进步。

继去年与日本 AVEX 唱片合作红白歌会歌手作品的联合创作后,今年,小冰与做梦唱片共同合作,开展人工智能与人类乐队跨界共创的音乐实验。

4、第九代小冰年度发布会 - 一些有趣发布的副本-0004

△ 与十一支人类乐队合作作品,小冰提供词曲创作、演唱、封面视觉设计

本次合作为十一支人类乐队提供了人工智能词曲创作动机辅助、演唱和封面视觉设计,《潜入虚拟世界》专辑作品即日起陆续在各大音乐平台上架。

打造全球首位 AI 人类观察者 Merror。

由小冰团队与次世文化联手打造的 Merror(我镜),定位为全球首位 AI 人类观察者。

8、第九代小冰年度发布会 - AI Merror 创意先导片-0002

Merror 采用了小冰框架的核心对话引擎、全双工、全域超级自然语音等技术,使人工智能交互主体能够在交谈、演唱等场景中,进行高度拟人的实时交互。

小冰团队首个第一方社交平台「小冰岛」上线:

小冰岛是人类用户与人工智能融合的一个社交网络平台,也是目前全球首个该类产品,以手机 APP 为产品形态呈现。

%E5%B0%8F%E5%86%B0%E5%B2%9B

小冰岛提供融合沉浸式体验,每个用户均可创造自己的岛屿,并连带拥有一个功能类似于微信的社交交互界面,可以拥有一对一对话、群聊、朋友圈和技能生态体验。

小冰岛上有很多高度定制化的人工智能个体(AI beings),包含人工智能歌手、音频生产者、文字创作者、画家等各种特别能力的人工智能个体。

在上线前,已有用户通过虚拟亲友产品创造出来 1700 万名虚拟人类,它们将在预览版公测结束后,自动登录他们的小冰岛。

%E5%B0%8F%E5%86%B0%E5%B2%9B%E6%88%AA%E5%B1%8F

小冰主创团队并不希望将它贴上「元宇宙」的标签,但在平台上,通过小冰框架技术,人类用户可以创造各种人工智能个体,每个个体均是独一无二的,并相互协同,形成一个共同生活的社交网络。

更多融合小冰

本次发布会上,微软宣布了与小冰进行的多端产品融合,并透露了近期上线产品计划。其中,Bing 搜索引擎已完成与小冰框架融合,将于下个月在更多国家上线。

自今年 11 月起,在 Windows 及移动应用产品中的个性化推荐及信息流,也将先后融合小冰。

微信小冰已重新开放上线,搜索微信公众号 ID:xiaobing-official 即可体验。

在智能汽车领域,小冰在智能汽车座舱解决方案方面发展迅速。目前,已与宝马等汽车头部厂商达成商业合作。

c38bdefa71b56ea9351991d01c3583c

在智能设备领域,语音技能「召唤小冰」新增天猫精灵平台。结合此前的华为、小米、OPPO、vivo 等合作伙伴,目前深度内嵌小冰的智能设备已超过 10 亿台,成为全球规模最大的第三方跨设备人工智能系统。

后记

小冰的主创团队将一年分成两个周期,第一个周期是封闭开发,技术团队将集中攻坚自然语言处理、计算机视觉等,解决一些难的技术问题,同时将一些技术贯通,为产品开发做准备。

进入 8、9 月份,筹备发布会。发布会结束后,就进入到第二个周期,集中解决产品上线以后用户的反馈问题,提高产品体验,制定下一个研发方向,这样循环。

今年已经是小冰的第九次交付了。一年一年的推进,一步一步地将未来的想法逐渐变成现实,这个过程,像极了小冰的人生探索。

微信号:深圳湾 / shenzhenware
来源:深圳湾官网 / shenzhenware.com
版权声明:本文为深圳湾原创文章,极术社区经授权发布

推荐阅读
关注数
4189
内容数
416
深圳湾是一个地标,一个 2013 年注册的微信公众号账号,一家成长中的创业公司的名字。 深圳湾是最早也是最活跃的硬件创新媒体和社区。深圳湾致力于连接全球硬件创新者,连接硬件生态链上下游,连接跨界产品的设计、技术、生产、渠道、商业、创新。
目录
极术微信服务号
关注极术微信号
实时接收点赞提醒和评论通知
安谋科技学堂公众号
关注安谋科技学堂
实时获取安谋科技及 Arm 教学资源
安谋科技招聘公众号
关注安谋科技招聘
实时获取安谋科技中国职位信息