以下是关于 ChatBot 搭建的相关知识:
2022年11月,ChatGPT横空出世,背后基于GPT3.5。GPT3.5其实已经不是单纯的LLM基座模型了,据说它跟InstrcutGPT是同源技术,因此下面我们就以InstructGPT为参照介绍ChatBot是怎么炼成的。首先概览式地介绍一下训练ChatBot所需要的几个阶段,有个基本印象阶段0:PT阶段(Pre-train)。这个阶段建立模型的capacity,就是确定模型各方面能力的天花板阶段1:SFT阶段(Supervised Fine-tune)。这个阶段让模型学会conversational format,就是知道了对话应该按什么形式展开。阶段2:RLHF阶段(Reinforcement Learning from Human Feedback)。这个阶段细分为RM(Reward Model)阶段和RL(Reinforcement Learning)阶段,能激发出模型具备多种能力,包括但不限于safty、reasoning和stability我非常喜欢AK的[这张图](https://link.zhihu.com/?target=https%3A//www.youtube.com/watch%3Fv%3DbZQun8Y4L2A),简单清晰把重要信息点都罗列了出来
作者:熊猫大侠COW是基于大模型搭建的Chat机器人框架,将多模型塞进自己的微信里实现方案。基于这篇张梦飞同学也写了一个更适合小白的使用教程:[【保姆级】一步一图,手把手教你把AI接入微信副本](https://waytoagi.feishu.cn/wiki/A9w1wUcXSihF6XkeKVic8CXxnHb)本文带你实现:1、打造属于自己的ChatBot(文本对话、文件总结、链接访问、联网搜索、图片识别、AI画图等等)2、常用开源插件的安装应用正式开始前你需要知道:ChatBot相较于在各大模型网页端使用区别:本实现思路需要接入大模型API的方式实现(API单独付费)风险与注意事项:1、微信端因为是非常规使用,会有封号危险,不建议主力微信号接入。2、本文只探讨操作操作步骤,请依法合规使用-大模型生成的内容注意甄别,确保所有操作均符合相关法律法规的要求。-禁止将此操作用于任何非法目的。-处理敏感或个人隐私数据时注意脱敏,以防任何可能的滥用或泄露。
作者:熊猫大侠COW是基于大模型搭建的Chat机器人框架,将多模型塞进自己的微信里实现方案。基于这篇张梦飞同学也写了一个更适合小白的使用教程:[【保姆级】一步一图,手把手教你把AI接入微信副本](https://waytoagi.feishu.cn/wiki/A9w1wUcXSihF6XkeKVic8CXxnHb)本文带你实现:1、打造属于自己的ChatBot(文本对话、文件总结、链接访问、联网搜索、图片识别、AI画图等等)2、常用开源插件的安装应用正式开始前你需要知道:ChatBot相较于在各大模型网页端使用区别:本实现思路需要接入大模型API的方式实现(API单独付费)风险与注意事项:1、微信端因为是非常规使用,会有封号危险,不建议主力微信号接入。2、本文只探讨操作操作步骤,请依法合规使用-大模型生成的内容注意甄别,确保所有操作均符合相关法律法规的要求。-禁止将此操作用于任何非法目的。-处理敏感或个人隐私数据时注意脱敏,以防任何可能的滥用或泄露。