大模型的幻觉

以下是关于解决 AI 幻觉问题的一些方法： 1. 借鉴人类应对认知偏差的方法：为解决 AI 幻觉问题提供思路，开发相应技术手段，帮助 AI 更好地理解世界，做出更准确的判断。例如对 AI 模型的训练数据进行“大扫除”，去除错误、补充缺失、平衡偏差，让其学习到更真实全面的知识。 2. 打开 AI 的“黑箱”：让 AI 的“思考过程”更透明，便于人类理解和监督。可解释性 AI 技术能帮助理解 AI 模型如何做出判断，避免因错误逻辑或数据导致错误结论。 3. 打造 AI “智囊团”：让多个 AI 模型协同工作，共同解决问题，避免单个模型的局限性导致的错误。 4. 运用提示词工程：在询问代码功能时，要求 AI 逐行解释代码的含义。明确限制 AI 的生成范围，例如在询问名人名言时指定名人姓名和相关主题，在询问新闻事件时指定事件的时间范围和相关关键词。将提示词变得清晰、具体、有针对性，引导 AI 生成更准确可靠的内容。 5. 进行数据“体检”：为 AI 模型提供“干净”“健康”的训练数据，是预防 AI 幻觉的根本措施。包括数据清洗，去除错误信息、补充缺失数据、修正不一致内容，并消除数据中的偏见；数据增强，为模型提供更多更丰富的训练数据，提高模型的泛化能力。

大型语言模型有时会产生所谓的“幻觉”。幻觉是指模型在生成文本时产生不准确、误导性或不相关信息的倾向。这种现象通常发生在模型试图填补其知识或理解上的空白时，尤其是在处理复杂、模糊或具有多义性的输入时。 幻觉的原因包括： 过度泛化：模型可能会过度泛化从训练数据中学到的模式，导致在新的或不常见的情境中产生不准确的信息。 缺乏更新信息：由于大型语言模型通常是基于截至特定时间点的数据集进行训练的，它们可能不具备最新的信息或事件更新。 错误的信息源：在训练过程中，模型可能会吸收不准确或误导性的信息，这些信息可能来源于训练数据中的错误或不准确的数据源。 对模糊或歧义输入的误解：当输入信息含糊不清或具有多种解释时，模型可能会生成与原始意图不符的响应。 为了连贯性牺牲准确性：在尝试生成流畅、连贯的文本时，模型有时可能会牺牲信息的准确性。 为了避免幻觉，用户在使用大型语言模型时应该保持警惕，特别是在处理关键决策或需要高度准确性的情境中。验证模型提供的信息，并从多个可靠来源进行交叉检查是非常重要的。此外，随着技术的进步，模型的设计和训练方法也在不断改进，以减少幻觉现象的发生。

以下是一些国内外好用的图生视频模型： 可灵（国内，免费） 网址：https://klingai.kuaishou.com/ 支持文生视频、图生视频。 支持图生视频首尾帧功能。 提示词可使用中文。 文生视频支持正向提示词、反向提示词、运镜控制、时长选择（5s、10s），支持 16:9、9:16、1:1 尺寸。 图生视频除了不可运镜控制以外，其他跟文生视频基本相同。 默认生成 5s 的视频。 ETNA（国内） 网址：https://etna.7volcanoes.com/ 由七火山科技开发的文生视频 AI 模型。 可以根据用户简短的文本描述生成相应的视频内容。 生成的视频长度在 8 15 秒，画质可达到 4K，最高 38402160，画面细腻逼真，帧率 60fps。 文生视频，支持中文，时空理解。 关于可灵的文生视频效果，测试者 Austin 周安鑫进行了以下测试： 1. 场景识别：包括室内和室外，如客厅的沙发、液晶电视、漂亮的波斯猫、超现实主义的蜿蜒河流、茂密森林、灿烂花海、碧绿草坪等。 2. 物体识别：涵盖静态和动态物体，如水晶球、跳动的火焰、翱翔的飞鸟、闪烁的流星、飞溅的水珠等。 3. 人物识别：包括面部和姿态，如一个人笑容灿烂、一个人惊恐愤怒，一位芭蕾舞女孩在冰面上跳舞等。 4. 动作识别：包含基本和复杂动作，如短跑运动员快速奔跑、赛车手驾驶跑车激烈漂移等。 5. 事件检测：有简单和复杂事件，如一位帅哥在喝水、外星文明和地球进行星际大战等。 6. 环境变化：涉及光线和天气，如奇幻的极光舞动变幻、城市写字楼灯光忽明忽暗、闪电交加、乌云密布、台风、大雨等。 7. 多对象场景：包括单一和多对象场景，如 1 个飞行员驾驶战斗机翱翔太空、海军指挥航母战斗群展开激烈战斗等。 8. 特殊场景：有遮挡和非标准场景，如城市大雾遮挡摩天大楼、一边是神秘海底世界，一边是梦幻糖果屋。 9. 细节检测：包含小物体和微表情，如崭新的苹果电脑屏幕上播放电影、瞳孔收缩、脸颊泛红、嘴唇微微颤抖。

以下是关于模型的相关信息： 新的 gpt3.5turbo 模型针对会话进行了优化，原始的 GPT3.5 模型针对文本补全进行了优化。 用于创建嵌入和编辑文本的端点有自己的一组专用模型。 在 AI 输入框下方有一个下拉列表，允许选择要使用的模型。默认情况下，Cursor 已准备好使用的模型包括：GPT4o、GPT4、Claude 3.5 Sonnet、cursorsmall。其中，cursorsmall 是 Cursor 的自定义模型，不如 GPT4 智能，但速度更快，用户可无限制访问。您可以在 Cursor Settings > Models > Model Names 下添加其他模型。 谷歌一直在测试自己的人工智能 Bard，由各种基础模型驱动，最近是名为 PaLM 2 的模型。 Anthropic 发布了 Claude 2，其最值得注意的是有非常大的上下文窗口，与其他大型语言模型相比，不太可能恶意行事。

目前在具备图像 OCR 能力的大模型方面，一些较为知名和好用的包括百度的文心大模型、阿里云的通义大模型等。但大模型的性能和适用场景可能会因具体需求和使用场景的不同而有所差异。您可以根据自己的具体需求进一步评估和选择。

AI 大模型中带有“instruct”通常与指令微调相关。在大模型的训练过程中，指令微调是其中一个重要阶段。此阶段模型被训练以理解并执行具体指令，例如翻译文本等，从而能够回答问题。指令微调阶段输入的内容通常包括三个部分，如“Instruct：请你翻译下面这段话”“Input：一段英文”“Output：一段中文”。通过指令微调，模型能够更好地按照人类的期望和具体要求进行输出。

我是 WaytoAGI 专属问答机器人，基于 Aily 和云雀大模型。 Aily 是飞书团队旗下的企业级 AI 应用开发平台，提供了简单、安全且高效的环境，帮助企业轻松构建和发布 AI 应用，推动业务创新和效率提升。 云雀是由字节跳动研发的语言模型，通过便捷的自然语言交互，能够高效地完成互动对话、信息获取、协助创作等任务。 此外，还有一些免费的大模型接口，如阿里的通义千问大模型接口，可创建 API key。智谱 AI（ChatGLM）、科大讯飞（SparkDesk）也有免费接口，但国内的大模型大多限制一定免费额度的 Token。 谷歌的 Gemini 大模型（gemini 1.5）、海外版 Coze 的 GPT4 模型是免费且能图片识别，但需要给服务器挂梯子。想使用的话，可参考张梦飞同学写的教程。 在深入了解 AI 运作原理和众多落地产品后，重新思考 AI 大模型引发的变革。此前曾有疑问，大模型与智能语音技能的 NLU 存在差异。语音技能 NLU 是通过一系列规则、分词策略等训练而成，运作逻辑规律可观测，具有 ifelse 式逻辑性。而大模型凭借海量数据在向量空间中学习知识的关联性形成，运作逻辑难以观测，脱离了 ifelse 的层面。

训练模型来协助运营跨境电商线上店铺，仅依靠一些精准的关键词通常是不够的。模型的训练需要多方面的数据和信息，包括但不限于产品的详细描述、客户的评价和反馈、市场趋势、竞争对手的情况等。精准的关键词可以作为其中的一部分输入，但不足以全面有效地训练模型以达到理想的辅助运营效果。