编曲写作教手语，谷歌实验室用AI玩跨界

智东西

(资料图)

编译| 铭滟

编辑 | 徐珊

智东西8月4日消息，据谷歌官网发布，谷歌旗下的谷歌实验室正在与多领域人士进行实验性AI合作，塑造新兴技术，并满足不同领域人士的独特需求。该系列合作被称为“实验室课程”（Lab Sessions）。目前谷歌已发布前三场课程，横跨作曲家、Rapper和聋哑人研究三大领域。

谷歌实验室的主要职责是深度试验AI，检验AI的研究假设和开发新技术。此次跨界合作是谷歌实验室的一项新举措，他们希望通过新途径展示谷歌实验室的跨学科合作成果。

图为谷歌实验室课程，来源：谷歌官网

此次发布的实验室课程中分别包括作曲家兼数字音乐家Dan Deacon，说唱歌手、麻省理工学院访问学者Lupe Fiasco和佐治亚理工学院和罗切斯特理工学院（RIT）国家聋人技术研究所（NTID）的学生。

未来，谷歌实验室课程也将与各领域内人士展开实验性AI合作。谷歌实验室的合作对象将横跨各个行业，包括艺术家、科学家、研究人士、学生、创业者和企业家等等。

图为Dan Deacon，来源：谷歌官网

作曲家兼数字音乐家Dan Deacon曾与谷歌研究人员合作，在2023年谷歌I/O大会上带来了一场音乐表演。

此次Deacon尝试了谷歌的生成式音乐大模型MusicLM，为他的新歌提供部分素材。除此之外，Deacon也尝试了Bard，帮助自己进行冥想放松。他还尝试了生成式视频大模型Phenaki，体验到将它的歌词投影在舞台上的视觉效果。

图为Lupe Fiasco，来源：谷歌官网

于Rapper而言，一轮精彩的Diss（Rapper通过原创歌词表达自己态度的方式）可以成为他的高光时刻。此次与谷歌合作的Rapper兼麻省理工学院访问学者Lupe Fiasco也表现出了对原创歌词的坚持。在试验AI工具PaLM API和MakerSuite时，Fiasco表示他不希望用AI来创作歌词，但会期待AI给自己带来全新的创作视角。

基于此，谷歌结合Fiasco的抒情方式和语言技巧，推出了TextFX。TextFX仍处于实验阶段，其中囊括10个AI工具，可供作家、Rapper等文字工作者使用。

图为RIT和NTID的学生与谷歌合作，来源：谷歌官网

自去年开始，谷歌与佐治亚理工学院和罗切斯特理工学院（RIT）国家聋人技术研究所（NTID）的学生合作，共同探索AI计算机视觉模型如何帮助人们以新的方式学习手语。据统计数据显示，约95%的聋哑婴儿都是听力正常的父母所生，父母不懂手语，更不懂怎么教手语。

图为PopSignAI界面和手语游戏示意

所以，针对该问题，学生们与谷歌研究人员和Kaggle社区共同开发了一款名为PopSignAI的游戏。这款游戏旨在帮助聋哑儿童学习美国手语。游戏中的手语教程以“MacArthur-Bates沟通发展量表”（MacArthur-Bates Communicative Development Inventories）为标准，涵盖250个美国手语（American Sign Language，ASL）。

谷歌与各领域人士的跨界合作，听起来似乎有点超出想象，但细究之后可以看出，AI可以成为多领域的生产力工具，提升人们的工作效率与生活质量。

而此次谷歌与各界人士的合作，也进一步凸显了谷歌在AI领域内的布局。回顾此前谷歌合并DeepMind与谷歌大脑团队，迭代Bard聊天机器人以及开展跨领域AI实验等举措，或许意味着谷歌将在AI领域内开拓一条差异化赛道。谷歌实验室课程也将继续更新，我们也会持续关注。

来源：谷歌官网

关键词：