开发角色在使用 AI 时可能涉及以下工具:
在游戏开发方面:
这个选项更加技术化,但它能让你对外形因素以及你的AI伴侣的个性有最大的控制权。你可以组合多种工具,创造出你理想中的伴侣,你可以通过短信、电话甚至实时视频聊天与其互动。个性(LLM的文本):一些开源模型(尤其是Vicuna和Pygmalion)已经经过了微调,以在从具有特定个性到无审查的角色扮演等各种应用场景中表现出色。记忆(向量存储):像Pinecone这样的向量存储系统可以让你与伴侣建立持续的关系,配置代码以存储长期记忆、背景故事和其他独特信息。语音(语音合成):像ElevenLabs这样的产品可以赋予你的伴侣一种声音,让你可以控制年龄、性别和口音。外表(SD模型作图):LoRAs(类似于Civitai上的那些)让你对AI伙伴的图像风格、细节和设置有精细的控制。动画(视频动画):像D-ID和HeyGen这样的工具可以使图像“说话”;尽管我们已经看到了一些有希望的新模型能够生成高保真度的说话人脸,但可供使用的模型并不多。平台:这是伴侣的基础代码和内部逻辑执行的地方。如今,大多数开发者仍然在GCP和AWS上部署和运行他们的AI伴侣,但像Steamship(其中运行GirlfriendGPT)这样的解决方案正在迅速获得伴侣特定用例的关注。UI层:一个前端界面,让你能够与你的合作伙伴进行实际互动。SillyTavern、Agnaistic和KoboldAI是受欢迎的选择。(上图)这些图像模型可以根据几乎任何想象的兴趣定制生成图像-Furry Diffusion Discord上的这位用户对模型进行了微调,以适应毛茸茸的兴趣。如果您想要进行实验,我们刚刚推出了一个用于开始构建人工智能应用的开源模板。该项目包括了您从零开始编码伴侣所需的所有基本要素:与基于文本的模型一起工作、流式传输聊天回应、为虚拟伴侣生成适当的外貌,以及将长期记忆存储在向量数据库中。我们还将发布后续的文章和更多开源项目,详细介绍开发者用来创建人工智能伴侣的技术栈。
Unity是最受欢迎的游戏引擎之一,其高品质搭建2D和3D世界的开发能力以及跨平台输出的特性,让它这些年来不断引领游戏开发的潮流。(官方最新数据称每月活跃创作者达180万,历史里程碑级有关背景信息,见评论区)从开发视角,Unity AI提供了一个新Copliot工具;通过与Muse Chat聊天,快速启动创建一个游戏项目:例如让AI直接一键生成塔防类游戏的基础框架,或让AI创建的人物角色来个后空翻;从工具学习的角度,你也可以让Muse Chat和讨论如何一步步熟悉工程环境本身,并要求AI协助编码。(视频演示第10秒左右,列出了简要过程)从内容生产角度,让Muse Chat创建3D材质、动画等内容,现在你可以不断用自然语言输入promopts完成创建和编辑你需要的资产(Asset)。整个建构被Copliot模式驱动,这是前人无法想象的新的工作流。(如果你想我一样感觉异常兴奋,Muse Chat现已经开放Waiting list,这里申请加入https://create.unity.com/ai-beta。官方提示这个暑假会进一步开放。)第二个工具被称为Unity Sentis。它允许你在Unity运行时为你的游戏或应用程序嵌入AI模型,直接在终端用户平台上增强游戏玩法和其他功能。这是第一个将AI模型嵌入到实时3D引擎中的跨平台解决方案,你可以一次构建,然后将你的模型嵌入到多个平台上,从移动设备到PC,主机游戏。在技术层面,它将神经网络与Unity运行时连接起来,意味着Sentis解锁了无穷的可能性。(还在封测阶段)换句话说,它指向了游戏世界从有限迈向无限的重要一步。
这个选项更加技术化,但它能让你对外形因素以及你的AI伴侣的个性有最大的控制权。你可以组合多种工具,创造出你理想中的伴侣,你可以通过短信、电话甚至实时视频聊天与其互动。个性(LLM的文本):一些开源模型(尤其是Vicuna和Pygmalion)已经经过了微调,以在从具有特定个性到无审查的角色扮演等各种应用场景中表现出色。记忆(向量存储):像Pinecone这样的向量存储系统可以让你与伴侣建立持续的关系,配置代码以存储长期记忆、背景故事和其他独特信息。语音(语音合成):像ElevenLabs这样的产品可以赋予你的伴侣一种声音,让你可以控制年龄、性别和口音。外表(SD模型作图):LoRAs(类似于Civitai上的那些)让你对AI伙伴的图像风格、细节和设置有精细的控制。动画(视频动画):像D-ID和HeyGen这样的工具可以使图像“说话”;尽管我们已经看到了一些有希望的新模型能够生成高保真度的说话人脸,但可供使用的模型并不多。平台:这是伴侣的基础代码和内部逻辑执行的地方。如今,大多数开发者仍然在GCP和AWS上部署和运行他们的AI伴侣,但像Steamship(其中运行GirlfriendGPT)这样的解决方案正在迅速获得伴侣特定用例的关注。UI层:一个前端界面,让你能够与你的合作伙伴进行实际互动。SillyTavern、Agnaistic和KoboldAI是受欢迎的选择。(上图)这些图像模型可以根据几乎任何想象的兴趣定制生成图像-Furry Diffusion Discord上的这位用户对模型进行了微调,以适应毛茸茸的兴趣。如果您想要进行实验,我们刚刚推出了一个用于开始构建人工智能应用的开源模板。该项目包括了您从零开始编码伴侣所需的所有基本要素:与基于文本的模型一起工作、流式传输聊天回应、为虚拟伴侣生成适当的外貌,以及将长期记忆存储在向量数据库中。我们还将发布后续的文章和更多开源项目,详细介绍开发者用来创建人工智能伴侣的技术栈。