目前已有生成音效的 AI 应用。在游戏领域,音效是 AI 的一个具有吸引力的开放领域。已有学术论文探讨使用 AI 在电影中生成“现场效果音”(如脚步声)的想法,但在游戏中的商业产品尚属稀少。不过,由于游戏的交互性质,这只是时间问题。例如,可以使用实时的生成性 AI 模型来制作现场效果音,能根据游戏参数(如地面表面、角色体重、步态、鞋履等)生成适当且每次略有不同的音效。在电影制作中,虽然配音一开始可能因 AI 语音在情绪表达上不够丰满而选择专业声音表演者,但随着技术发展,未来会有更多 AI 生成音效的工具可供选择。同时,为您分享三个音效资源站:
声音和音乐是游戏体验的重要组成部分。我们开始看到公司使用生成性AI来生成音频,以补充图形方面已经进行的工作。音效音效是AI的一个具有吸引力的开放领域。已经有[学术论文](https://arxiv.org/abs/2107.09262)探讨了使用AI在电影中生成“现场效果音”(例如,脚步声)的想法,但在游戏中的商业产品尚属稀少。我们认为这只是时间问题,因为游戏的交互性质使这成为生成性AI的明显应用,既可以在生产过程中创建静态音效(例如,“以星球大战的风格制作激光枪声音”),也可以在运行时创建实时交互式音效。考虑一个简单的任务:为玩家角色生成脚步声音。大多数游戏通过包含少量预先录制的脚步声音来解决这个问题:草地上行走的声音、碎石上行走的声音、草地上奔跑的声音、碎石上奔跑的声音等。这些声音生成和管理起来都很繁琐,并且在运行时听起来重复和不真实。更好的方法是使用实时的生成性AI模型来制作现场效果音(foley sound effects),它可以在飞行中生成适当的音效,每次都略有不同,而且能够根据游戏参数(如地面表面、角色体重、步态、鞋履等)进行响应。音乐音乐一直是游戏开发中的一个挑战。音乐很重要,因为它可以帮助设置情感基调,就像在电影或电视中一样。但由于游戏可以持续数百甚至数千小时,音乐很快就可能变得重复或令人烦躁。此外,由于游戏的交互性质,让音乐精确匹配屏幕上发生的事情可能很困难。
人工智能模型的另一个令人兴奋的点在于,可以用于过滤现有动画,加上新的特效,例如让动画人物一键看起来喝醉了,或者老了,或者高兴。这一领域的公司包括Kinetix、DeepMotion、RADiCAL、Move Ai和Plask。KinetixDeepMotionRADiCAL关卡设计和游戏世界构建(Level design & world building)游戏创作中最耗时的方面之一是构建游戏世界,生成式人工智能可以用于这项任务。像《Minecraft》、《No Man's Sky》和《Diablo》这样的游戏,因程序化技术生成关卡而闻名,其中关卡是随机生成的,每次都不一样,但都遵循关卡设计者制定的规则。新的The new Unreal 5游戏引擎的一大卖点在于,它收集了用于开放世界设计的程序化工具,例如叶子的放置。例如Promethean、MLXAR或Meta的Builder Bot这些公司,都是看到了生成式AI技术的机会。这方面的学术研究已经有一段时间了,包括Minecraft的生成技术或Doom的关卡设计。为什么生成式人工智能工具具备用于游戏关卡设计的潜力?因为AI具备创造不同风格的关卡和游戏世界的能力。可以想象一下,通过工具迅速生成一个1920年纸醉金迷时代纽约的游戏世界,或者是神秘的反乌托邦银翼杀手的设计,或者是托尔金派(类似于魔戒的设计和景观)的幻想世界(vs dystopian blade-runner-esque future,vs.Tolkien-esque fantasy world.)。下面的概念是由Midjourney使用提示生成的游戏中不同风格关卡:音频声音和配乐是游戏体验的重要部分。已经有公司开始使用生成式人工智能生成音频,以补充图形方面的工作。音效
配音一开始打算用AI,但测试多种不同的工具后,觉得AI语音在影视作品台词的表达上情绪依旧不够丰满,因此最后邀请了专业声音表演者来配音。音效方面,由于这次的音效需求比较简单,所以直接采用了剪映中的音效资源库。随着AI技术的不断发展,相信之后会有AI生成音效的工具来供我们选择。[316_1718987871.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/Is05b3R9coD8texdl9Nc3zennVe?allow_redirect=1)资源彩蛋附上三个音效资源站作为分享(无广):https://www.lookae.com/sucai/sfx/有大部分免费且分好类的音效包可供下载https://www.epidemicsound.com/专业的音效站点,Gen48合作站https://sc.chinaz.com/yinxiao/适合搜索单个音效下载的站点点击阅读原文:欢迎前往XHS浏览社群成员优秀作品one more thing:我不是天才,我只是有幸和众多天才一起工作from牛马:飞扬