Navigate to WaytoAGI Wiki →
Home/question.detail.breadcrumb.questionList/question.detail.breadcrumb.questionDetail

医疗影像使用AI的模型有那些？

Answer

以下是一些在医疗影像中使用的 AI 模型：

  • 智谱·AI 开源的模型，如 WebGLM-10B，它利用百亿参数通用语言模型（GLM）提供高效、经济的网络增强型问题解答系统，旨在通过将网络搜索和检索功能集成到预训练的语言模型中，改进现实世界的应用部署。代码链接：WebGLM，模型下载：Huggingface
  • WebGLM-2B，同样利用百亿参数通用语言模型（GLM）提供高效、经济的网络增强型问题解答系统。代码链接：WebGLM，模型下载：Huggingface
  • MathGLM-2B，在训练数据充足的情况下，20 亿参数的 MathGLM 模型能够准确地执行多位算术运算，准确率几乎可以达到 100%，其结果显著超越最强大语言模型 GPT-4 在相同测试数据上 18.84%的准确率。代码链接：MathGLM，模型下载：THU-Cloud
  • MathGLM-Large，采用 GLM 的不同变体作为骨干来训练 MathGLM，包括具有 335M 参数的 GLM-large 和 GLM-10B。此外，还使用 ChatGLM-6B 和 ChatGLM2-6B 作为基座模型来训练 MathGLM。这些骨干模型赋予 MathGLM 基本的语言理解能力，使其能够有效理解数学应用题中包含的语言信息。代码链接：MathGLM，模型下载：THU-Cloud
  • MathGLM-10B，采用 GLM 的不同变体作为骨干来训练 MathGLM，包括具有 335M 参数的 GLM-large 和 GLM-10B。此外，还使用 ChatGLM-6B 和 ChatGLM2-6B 作为基座模型来训练 MathGLM。这些骨干模型赋予 MathGLM 基本的语言理解能力，使其能够有效理解数学应用题中包含的语言信息。代码链接：MathGLM，模型下载：THU-Cloud、魔搭社区
  • MathGLM-ChatGLM-6B，采用 GLM 的不同变体作为骨干来训练 MathGLM，包括具有 335M 参数的 GLM-large 和 GLM-10B。
Content generated by AI large model, please carefully verify (powered by aily)

References

智谱·AI 开源模型列表

我们还开源了以下模型，以便用户使用我们多元化的产品。|模型|介绍|代码链接|模型下载|<br>|-|-|-|-|<br>|WebGLM-10B|利用百亿参数通用语言模型（GLM）提供高效、经济的网络增强型问题解答系统。它旨在通过将网络搜索和检索功能集成到预训练的语言模型中，改进现实世界的应用部署。|[WebGLM](https://github.com/THUDM/WebGLM)|[Huggingface](https://huggingface.co/THUDM/WebGLM)|<br>|WebGLM-2B|利用百亿参数通用语言模型（GLM）提供高效、经济的网络增强型问题解答系统。它旨在通过将网络搜索和检索功能集成到预训练的语言模型中，改进现实世界的应用部署。|[WebGLM](https://github.com/THUDM/WebGLM)|[Huggingface](https://huggingface.co/THUDM/WebGLM-2B)|<br>|MathGLM-2B|在训练数据充足的情况下，20亿参数的MathGLM模型能够准确地执行多位算术运算，准确率几乎可以达到100%，其结果显著超越最强大语言模型GPT-4在相同测试数据上18.84%的准确率。|[MathGLM](https://github.com/THUDM/MathGLM)|[THU-Cloud](https://cloud.tsinghua.edu.cn/d/cf429216289948d889a6/)|

智谱·AI 开源模型列表

|模型|介绍|代码链接|模型下载|<br>|-|-|-|-|<br>|MathGLM-Large|采用GLM的不同变体作为骨干来训练MathGLM，包括具有335M参数的GLM-large和GLM-10B。此外，还使用ChatGLM-6B和ChatGLM2-6B作为基座模型来训练MathGLM。这些骨干模型赋予MathGLM基本的语言理解能力，使其能够有效理解数学应用题中包含的语言信息。|[MathGLM](https://github.com/THUDM/MathGLM)|[THU-Cloud](https://cloud.tsinghua.edu.cn/d/3d138deaf93441b196fb/)|<br>|MathGLM-10B|采用GLM的不同变体作为骨干来训练MathGLM，包括具有335M参数的GLM-large和GLM-10B。此外，还使用ChatGLM-6B和ChatGLM2-6B作为基座模型来训练MathGLM。这些骨干模型赋予MathGLM基本的语言理解能力，使其能够有效理解数学应用题中包含的语言信息。|[MathGLM](https://github.com/THUDM/MathGLM)|[THU-Cloud](https://cloud.tsinghua.edu.cn/d/bc3c7b5c46304c2b88f6/)|[魔搭社区](https://modelscope.cn/models/ZhipuAI/MathGLM/summary)|<br>|MathGLM-ChatGLM-6B|采用GLM的不同变体作为骨干来训练MathGLM，包括具有335M参数的GLM-large和GLM-10B。

问：请问 AI 有哪些应用场景？

人工智能（AI）已经渗透到各行各业，并以各种形式改变着我们的生活。以下是一些人工智能的主要应用场景：1.医疗保健:医学影像分析:AI可以用于分析医学图像，例如X射线、CT扫描和MRI，以辅助诊断疾病。药物研发:AI可以用于加速药物研发过程，例如识别潜在的药物候选物和设计新的治疗方法。个性化医疗:AI可以用于分析患者数据，为每个患者提供个性化的治疗方案。机器人辅助手术:AI可以用于控制手术机器人，提高手术的精度和安全性。2.金融服务:风控和反欺诈:AI可以用于识别和阻止欺诈行为，降低金融机构的风险。信用评估:AI可以用于评估借款人的信用风险，帮助金融机构做出更好的贷款决策。投资分析:AI可以用于分析市场数据，帮助投资者做出更明智的投资决策。客户服务:AI可以用于提供24/7的客户服务，并回答客户的常见问题。3.零售和电子商务:产品推荐:AI可以用于分析客户数据，向每个客户推荐他们可能感兴趣的产品。搜索和个性化:AI可以用于改善搜索结果并为每个客户提供个性化的购物体验。动态定价:AI可以用于根据市场需求动态调整产品价格。

Others are asking
哪些AI可以提取视频链接的文案
以下是一些可以提取视频链接文案的 AI 工具和相关功能： 1. 【TecCreative】： 产品链接生成视频：输入产品网站链接（目前主要支持 Amazon、Shopify、ETSY、Ebay、Appstore、Google Play、WIKI 等，其他网站来源持续接入中），选择数字人角色，点击立即生成。如遇生成失败，可尝试删除链接后缀，点击重新生成。 AI 视频高光切片：适用于有初始长视频素材，需要提取高光镜头对初始素材进行混剪投放到短视频平台。使用时点击上传视频，然后立即生成。 AI 商品图：适用于有商品初始素材（无背景或有背景均可），需要更换原图背景。上传商品图片，输入背景描述，点击开始生成。
2024-12-25
有哪些AI可以帮我将视频内容转化成文字
以下是一些可以帮助您将视频内容转化成文字的 AI 工具： 1. Pika：一款出色的文本生成视频 AI 工具，擅长动画制作，并支持视频编辑。 2. SVD：如果您熟悉 Stable Diffusion，可以直接安装这款最新的插件，在图片基础上直接生成视频。这是由 Stability AI 开源的 video model。 3. Runway：老牌 AI 视频生成工具，提供实时涂抹修改视频的功能，但需要收费。 4. Kaiber：视频转视频 AI，能够将原视频转换成各种风格的视频。 5. Sora：由 OpenAI 开发，可以生成长达 1 分钟以上的视频。 更多的相关网站可以查看： 另外，如果您想用 AI 把小说做成视频，大致的制作流程如下： 1. 小说内容分析：使用 AI 工具（如 ChatGPT）分析小说内容，提取关键场景、角色和情节。 2. 生成角色与场景描述：根据小说内容，使用工具（如 Stable Diffusion 或 Midjourney）生成角色和场景的视觉描述。 3. 图像生成：使用 AI 图像生成工具根据描述创建角色和场景的图像。 4. 视频脚本制作：将提取的关键点和生成的图像组合成视频脚本。 5. 音频制作：利用 AI 配音工具（如 Adobe Firefly）将小说文本转换为语音，添加背景音乐和音效。 6. 视频编辑与合成：使用视频编辑软件（如 Clipfly 或 VEED.IO）将图像、音频和文字合成为视频。 7. 后期处理：对生成的视频进行剪辑、添加特效和转场，以提高视频质量。 8. 审阅与调整：观看生成的视频，根据需要进行调整，比如重新编辑某些场景或调整音频。 9. 输出与分享：完成所有编辑后，输出最终视频，并在所需平台上分享。 根据视频脚本生成短视频的 AI 工具有： 1. ChatGPT + 剪映：ChatGPT 可以生成视频小说脚本，剪映则可以根据脚本自动分析出视频中需要的场景、角色、镜头等要素，并生成对应的素材和文本框架。 2. PixVerse AI：在线 AI 视频生成工具，支持将多模态输入（如图像、文本、音频）转化为视频。 3. Pictory：AI 视频生成器，允许用户轻松创建和编辑高质量视频，无需视频编辑或设计经验。用户提供文本描述，Pictory 将帮助生成相应的视频内容。 4. VEED.IO：提供了 AI 图像生成器和 AI 脚本生成器，帮助用户从图像制作视频，并规划从开场到结尾的内容。 5. Runway：AI 视频创作工具，能够将文本转化为风格化的视频内容，适用于多种应用场景。 6. 艺映 AI：专注于人工智能视频领域，提供文生视频、图生视频、视频转漫等服务，用户可以根据文本脚本生成视频。 这些工具各有特点，适用于不同的应用场景和需求，能够帮助您快速生成吸引人的视频内容。请注意，具体的操作步骤和所需工具可能会根据项目的具体需求和个人偏好有所不同。此外，AI 工具的可用性和功能也可能会随时间而变化，建议直接访问上述提供的工具网址获取最新信息和使用指南。
2024-12-25
有哪些AI可以解析视频内容
以下是一些可以解析视频内容的 AI： 1. MMVid：这是一个集成的视频理解系统，由 Microsoft Azure AI 开发，结合了 GPT4V 的能力和其他视觉、音频和语音处理工具，能处理和理解长视频内容并进行问答。它能够自动识别和解释视频中的元素，如人物行为、情感表达、场景变化和对话内容，从而实现对视频故事线的理解。其核心功能是将视频中的多模态信息（如视觉图像、音频信号和语言对话）转录成详细的文本脚本，这对于多种应用场景都非常有用，比如为视觉障碍人士提供视频内容的音频描述。 2. 对于将小说制作成视频的流程，大致如下： 小说内容分析：使用 AI 工具（如 ChatGPT）分析小说内容，提取关键场景、角色和情节。 生成角色与场景描述：根据小说内容，使用工具（如 Stable Diffusion 或 Midjourney）生成角色和场景的视觉描述。 图像生成：使用 AI 图像生成工具根据描述创建角色和场景的图像。 视频脚本制作：将提取的关键点和生成的图像组合成视频脚本。 音频制作：利用 AI 配音工具（如 Adobe Firefly）将小说文本转换为语音，添加背景音乐和音效。 视频编辑与合成：使用视频编辑软件（如 Clipfly 或 VEED.IO）将图像、音频和文字合成为视频。 后期处理：对生成的视频进行剪辑、添加特效和转场，以提高视频质量。 审阅与调整：观看生成的视频，根据需要进行调整，比如重新编辑某些场景或调整音频。 输出与分享：完成所有编辑后，输出最终视频，并在所需平台上分享。 请注意，具体的操作步骤和所需工具可能会根据项目的具体需求和个人偏好有所不同。此外，AI 工具的可用性和功能也可能会随时间而变化，建议直接访问上述提供的工具网址获取最新信息和使用指南。
2024-12-25
如何用AI一天赚50元
以下是一些利用 AI 一天赚 50 元的方法： 1. 开发如“航天小飞侠”这样的 AI 助理模型，为用户解答特定领域的问题，并设置抽奖环节增加体验感。 2. 用 AI 做手机壁纸，通过小红书等平台进行销售，例如 6 元一张，一天卖出一定数量。 3. 利用 AI 进行调酒，根据用户的 MBTI 和星座生成专属鸡尾酒配方，并现场调制销售。 4. 运用以下 AI 工具创作并变现： 研究工具：Claude、ChatGPT、Bing Chat、Perplexity 等。 图片处理：DallE、Leonardo、BlueWillow、Midjourney 等。 版权写作：Rytr、Copy AI、Wordtune、Writesonic 等。 设计：Canva、Clipdrop、Designify、Microsoft Designer 等。 网站搭建：10Web、Framer、Hostinger、Landingsite 等。 视频处理：Klap、Opus、Invideo、Heygen 等。 音频处理：Murf、LovoAI、Resemble、Eleven Labs 等。 SEO 优化：Alli AI、BlogSEO、Seona AI、Clearscope 等。 Logo 设计：Looka、LogoAI、Brandmark、Logomaster 等。 聊天机器人：Droxy、Chatbase、Voiceflow、Chatsimple 等。 自动化工具：Make、Zapier、Bardeen、Postman 等。
2024-12-25
Agi和ai
AGI（通用人工智能）和 AI（人工智能）是相关但有所不同的概念。 AI 是一种让机器展现智慧的目标，包括多种技术和应用，如机器学习、深度学习、大语言模型等。生成式人工智能（GenAI）是让机器产生复杂有结构内容的一种目标。AIGC（人工智能生成内容）则是利用人工智能技术生成包括文本、图像、音频和视频等内容的新型生产方式，ChatGPT 是 AIGC 在文本生成领域的一个应用实例。 OpenAI 在其内部会议上分享了 AGI 的五个发展等级： 1. 聊天机器人（Chatbots）：具备基本对话能力，主要依赖预设脚本和关键词匹配，用于客户服务和简单查询响应。 2. 推理者（Reasoners）：具备人类推理水平，能解决复杂问题，如 ChatGPT，能根据上下文和文件提供详细分析和意见。 3. 智能体（Agents）：不仅具备推理能力，还能执行全自动化业务，但目前许多 AI Agent 产品在执行任务后仍需人类参与。 4. 创新者（Innovators）：能够协助人类完成新发明，如谷歌 DeepMind 的 AlphaFold 模型，可预测蛋白质结构，加速科学研究和新药发现。 5. 组织（Organizations）：最高级别的 AI，能够自动执行组织的全部业务流程，如规划、执行、反馈、迭代、资源分配和管理等。 Web3 和人工智能初创公司 AGII 获得 1500 万美元融资。AGII 是一个 AI 驱动的平台，赋予用户轻松生成各个领域高质量内容的能力，提供一系列 AI 生成器和魔法工具，包括文本、图像、代码、聊天机器人、语音转文本和配音等功能，旨在帮助内容创作者、营销人员和企业以更短的时间创造引人入胜且有影响力的内容，并宣布推出平台的测试版以获取用户反馈并调整产品。
2024-12-25
chatAI与chatGPT有区别吗
ChatAI 并非一个明确且被广泛认知的特定概念。而 ChatGPT 具有明确的定义和特点： 从 OpenAI 的官网可知，ChatGPT 在 2022 年宣发时被称为一种模型，但在官网的帮助页面中又被称为一种服务。目前我们所熟知的 ChatGPT 逐渐演变成了一种可以兼容多种 GPT 模型的聊天应用（服务）。 与更注重人格属性，试图满足社交、情感、陪伴等需求。 与 Pi 相比，Pi 优先考虑与人的对话，评价标准在于对话自不自然、情商够不够高，而 ChatGPT 在某些情况下给出的建议相对泛泛。在机制设置上，Pi 采取提问式结尾、不断主动追问的方式更有让人聊下去的欲望。
2024-12-25
我在寻找一个能够帮我录制教学微视频的AI工具，希望能够帮助我提供一些文字对应的影像，然后也录我的真人，你可以帮我推荐码
目前在 AI 领域，专门用于录制教学微视频、提供文字对应影像并录制真人的工具相对较少。但您可以考虑使用一些视频编辑软件结合 AI 元素来实现您的需求。例如，Adobe Premiere Pro 具有强大的视频编辑功能，您可以在其中添加一些通过 AI 生成的素材，如特效、动画等。另外，剪映也是一个不错的选择，它操作相对简单，有一些智能的特效和模板可以使用。 如果您希望更直接地利用 AI 生成部分影像内容，一些 AI 绘画工具如 DALL·E2、StableDiffusion 等，可以根据您的文字描述生成图像，然后您再将其整合到视频中。 不过需要注意的是，这些工具可能需要您具备一定的操作技能和创意，才能更好地制作出符合您需求的教学微视频。
2024-09-05
目前字节有哪些可以运用到安全审核业务的大模型？
字节在安全审核业务中可能运用到的大模型包括： 1. Claude2100k 模型，其上下文上限是 100k Tokens，即 100000 个 token。 2. ChatGPT16k 模型，其上下文上限是 16k Tokens，即 16000 个 token。 3. ChatGPT432k 模型，其上下文上限是 32k Tokens，即 32000 个 token。 大模型的相关知识： 1. 大模型中的数字化便于计算机处理，为让计算机理解 Token 之间的联系，需把 Token 表示成稠密矩阵向量，这个过程称为 embedding，常见算法有基于统计的 Word2Vec、GloVe，基于深度网络的 CNN、RNN/LSTM，基于神经网络的 BERT、Doc2Vec 等。 2. 以 Transform 为代表的大模型采用自注意力机制来学习不同 token 之间的依赖关系，生成高质量 embedding。大模型的“大”指用于表达 token 之间关系的参数多，例如 GPT3 拥有 1750 亿参数。 3. 大模型的架构包括 encoderonly（适用于自然语言理解任务，如分类和情感分析，代表模型是 BERT）、encoderdecoder（同时结合 Transformer 架构的 encoder 和 decoder 来理解和生成内容，代表是 google 的 T5）、decoderonly（更擅长自然语言生成任务，典型使用包括故事写作和博客生成，众多 AI 助手基本都来自此架构）。大模型的特点包括预训练数据非常大（往往来自互联网，包括论文、代码、公开网页等，一般用 TB 级数据进行预训练）、参数非常多（如 Open 在 2020 年发布的 GPT3 已达到 170B 的参数）。
2024-12-25
大模型在金融领域的量化投研领域的应用
大模型在金融领域的量化投研领域有以下应用和特点： 1. 大型系统工程： 量化和大模型都需要大型计算集群，上万张卡的互联是对基础设施的极致挑战。量化对性能和效率有极致追求，交易指令速度至关重要；大模型在基础设施层面的每一点提升都能优化训练效率。 细节在大型系统工程中十分关键。量化交易系统包含多个方面，任何环节出问题都会导致交易系统失败；大模型预训练从数据到评估包含大量细节，如数据配比、顺序、训练策略等。 2. 本土化机会： 很多 Global 的量化基金到中国会水土不服，国家政策也限制其大规模开展业务，给国内量化基金崛起机会。 OpenAI、Google、Meta 等的模型中文能力一般，未对中国国情优化，不符合政策要求，给国内大模型公司本土化预训练机会。 两者都受政策影响极大，需要有效监管才能健康发展。 3. 其他相似之处： 少数精英的人赚大量的钱，做大模型和金融量化都不用很多人，但每个人都要绝顶聪明。 核心问题一样，下一个 token 预测和下一个股价预测类似。 都需要大量数据，都追求可解释性。 作者：黄文灏 源地址：https://zhuanlan.zhihu.com/p/646909899 最近和朋友讨论发现大模型预训练和金融量化有很多相似之处，作者恰好同时具有两者背景，做了对比。
2024-12-25
大模型在办公场景的应用
大模型在办公场景有诸多应用，具体如下： 基础办公提效：在 PPT、Excel、会议报告、策划会、文案包装、图文海报、客服机器人 bot 等方面，能从单个任务 task 到角色 role 再到角色间协同 collaboration 显著提高工作效率。 人力资源管理：覆盖招聘初期（如职位描述生成、简历分析、面试题设计）、员工绩效评估（分析员工工作表现，识别绩效趋势和提升点，为管理层提供数据支持的绩效反馈）以及员工培训与发展各个环节，提高工作效率。 通俗来讲，大模型是输入大量语料，让计算机获得类似人类的“思考”能力，能够理解自然语言，进行文本生成、推理问答、对话、文档摘要等工作。其训练和使用过程可类比为上学参加工作： 1. 找学校：训练大模型需要大量计算，GPU 更合适，只有购买得起大量 GPU 的才有资本训练自己的大模型。 2. 确定教材：大模型需要的数据量特别多，几千亿序列（Token）的输入基本是标配。 3. 找老师：即用合适的算法讲述“书本”中的内容，让大模型更好理解 Token 之间的关系。 4. 就业指导：为了让大模型更好胜任某一行业，需要进行微调（fine tuning）指导。 5. 搬砖：就业指导完成后，正式干活，比如进行翻译、问答等，在大模型里称之为推导（infer）。 在 LLM 中，Token 被视为模型处理和生成的文本单位，能代表单个字符、单词、子单词，甚至更大的语言单位，具体取决于所使用的分词方法（Tokenization）。Token 是原始文本数据与 LLM 可以使用的数字表示之间的桥梁。在将输入进行分词时，会对其进行数字化，形成一个词汇表（Vocabulary）。 此外，在游戏行业，大模型能降低成本，打造创新玩法，提供更好的游戏体验。如网易推出的首款 AI 手游《逆水寒》，将 AIGC 应用于美术开发，在 NPC 与玩家的交互上呈现独特剧情体验，还内嵌了全自动“AI 作词机”。在健身行业，AI 减重顾问既能解决售前客服问题，也能解决学员离开健身营之后的健康监护，提高学员体验。
2024-12-25
图像对比与图像搜索这块，有没有哪个ai大模型做的比较好比较深入的
在图像对比与图像搜索方面，以下是一些相关的 AI 大模型特点和应用： RAG（检索增强生成）：通过引用外部数据源为模型做数据补充，适用于动态知识更新需求高的任务。其原理是在基础大模型基础上引用外部数据，对搜索到的数据信息进行切片、拆分和语义理解，再根据用户提问进行检索和回答，但比基座模型更耗时。RAG 是一个检索生成框架，能够支持在本地运行。 AI 搜索：结合了多种能力，如 fine tuning、实时联网查询和查询知识源等，能够为用户整理出想要的内容。一些 AI 搜索平台专注于特定领域，如为程序员提供代码搜索。 多模态大模型：像能唱会跳、精通多种技能的机器人，能看见、听见、思考、说话，例如能识别物体、听取指令等。 生成式模型和决策式模型：决策式模型偏向逻辑判断，按预设程序固定输出；生成式模型偏随机性，能动态组合并结构化呈现，如在图像识别中，决策式模型返回关键词，生成式模型用语言表达结构化信息。
2024-12-25
ChatGPT如何训练需要的模型
ChatGPT 的训练模型主要包括以下几个方面： 1. 预训练（Pretrain）阶段：建立模型的能力上限，如确定模型各方面能力的天花板。此阶段跟 GPT3 的方法近似，例如采用 decoderonly 的网络架构，有特定的模型大小、输入窗口大小、单词本大小，见过大量的 tokens，使用大量的原始训练文本。 2. 监督微调（Supervised Finetune，SFT）阶段：让模型学会对话的形式展开，即知道如何按照对话的格式进行交流。 3. 强化学习从人类反馈（Reinforcement Learning from Human Feedback，RLHF）阶段：细分为奖励模型（RM）阶段和强化学习（RL）阶段，能激发模型具备多种能力，包括安全性、推理能力和稳定性等。 训练方式主要是通过材料学习，不断形成模型。其本质功能是“单字接龙”，通过自回归生成的方式，将生成的下一个词与之前的上文组合，不断重复生成任意长的下文。训练的目的不是记忆，而是学习提问和回答的通用规律，实现举一反三，即泛化。学习材料用于调整模型，得到通用模型，以处理未被数据库记忆的情况。ChatGPT 不是搜索引擎的升级版，搜索引擎无法给出未被数据库记忆的信息，而 ChatGPT 作为生成模型可以创造不存在的文本，但可能存在混淆记忆、无法直接查看和更新所学、高度依赖学习材料以及缺乏及时性和准确性等缺点。
2024-12-24
如何训练模型
训练模型的方法有多种，以下为您介绍几种常见的训练模型方式： 1. 用 SD 训练一套贴纸 LoRA 模型： 原始形象：MJ 初步产出符合设计想法的贴纸原始形象。 二次加工：完成贴纸的白色边线等细节加工。 处理素材：给训练集图片打 tag，修改 tag。 训练模型：将上述处理好的数据集做成训练集，进行训练。 2. 基于百川大模型训练虚拟专家： 选择 Baichuan27BChat 模型作为底模，配置模型本地路径，配置提示模板。 在 Train 页面里，选择 sft 训练方式，加载定义好的数据集 wechat 和 self_cognition。 学习率和训练轮次非常重要，根据自己的数据集大小和收敛情况来设置。 使用 FlashAttention2 可减少显存需求，加速训练速度。 显存小的朋友可以减少 batch size 和开启量化训练，内置的 QLora 训练方式非常好用。 需要用到 xformers 的依赖。 显存占用 20G 左右，耐心等待一段时间。 3. 使用编码器解码器架构构建诗歌生成器： 在训练模型之前，需要一个损失函数，由于本质上是一个多类分类问题，损失将是稀疏的分类交叉熵损失，配置从 logits 计算的损失。 有了损失后编译模型，将损失和优化器联系在一起。 选择训练的时期，一个时期是对数据集的完整传递，进行多次训练，并提供回调以确保在训练期间保存权重。 从实际的字符串中提取字符序列，使用 TensorFlow 的 TF 字符串 Unicode 拆分功能。 将字符序列转化为数字，使用 TF Keras 层中的 StringLookup 函数将每个字符映射到给定的 ID，也可使用同一层的 StringLookup 函数获得反向映射。 将处理后的数据作为神经网络的训练数据集，使用 TF Data Dataset API。
2024-12-24
AI在医疗中的应用
AI 在医疗中的应用十分广泛，主要包括以下几个方面： 1. 医学影像分析：AI 可用于分析 X 射线、CT 扫描和 MRI 等医学图像，辅助诊断疾病。 2. 药物研发：加速药物研发过程，比如识别潜在的药物候选物和设计新的治疗方法。 3. 个性化医疗：通过分析患者数据，为每个患者提供个性化的治疗方案。 4. 机器人辅助手术：用于控制手术机器人，提高手术的精度和安全性。 在医疗健康生物制药的研究方面，AI 也发挥着重要作用，取得了一些最新进展： 1. AI 提前三年诊断胰腺癌。 2. 两名高中生与医疗技术公司合作，利用 AI 发现了与胶质母细胞瘤相关的三个新靶基因。 3. AI 帮助筛选抗衰老的高效药物候选物。 4. 使用 AI 寻找阿尔兹海默症的治疗方法。 5. AI 帮助早期诊断帕金森。 当前，我们正处于一个革命的起点，AI 正在使生物制药和医疗保健产业化，被应用于从药物设计、诊断到医疗保健交付和后勤功能的各个方面。
2024-12-23
AI医疗APP或者网站
以下为一些 AI 医疗相关的 APP 或网站： 微医 APP：是一个 AI 医疗健康管理平台，使用数据分析、机器学习技术，市场规模达数十亿美元。它能管理用户健康数据，提供健康建议，例如根据用户的慢性疾病风险，提供饮食、运动和用药建议。 腾讯觅影：作为 AI 医疗影像分析平台，运用数据分析、机器学习技术，市场规模达数十亿美元。它能够分析医疗影像，辅助医生诊断，比如检测肺部结节、乳腺病变等，提高诊断效率和准确性。 平安好医生 APP：其中包含 AI 医疗诊断辅助系统，借助数据分析、机器学习技术，市场规模达数十亿美元。它可以辅助医生进行疾病诊断，提高诊断准确性，用户上传症状描述和检查报告后，系统能给出初步的诊断建议和治疗方案。
2024-12-17
大语言模型与医疗应用
大语言模型在医疗领域有以下应用和相关项目： XrayGLM：首个会看胸部 X 光片的中文多模态医学大模型。 地址：https://github.com/WangRongsheng/XrayGLM 简介：促进中文领域医学多模态大模型的研究发展，在医学影像诊断和多轮交互对话上有潜力。 MeChat：中文心理健康支持对话大模型。 地址：https://github.com/qiuhuachuan/smile 简介：由 ChatGLM6B LoRA 16bit 指令微调得到，通过扩展真实的心理互助 QA 为多轮对话，提高在心理健康支持领域的表现。 MedicalGPT 地址：https://github.com/shibing624/MedicalGPT 简介：训练医疗大模型，实现包括二次预训练、有监督微调、奖励建模、强化学习训练，并发布中文医疗 LoRA 模型。 在商业化应用方面： 彭博发布了金融领域的大模型 BloombergGPT，医联发布了医疗大语言模型 MedGPT，在其所在的垂直领域发挥实际诊疗价值。 OpenAI 对 GPT 模型进行了更新，降低了价格，且正在开发新的技术以降低训练模型的成本。 商汤科技联合创始人杨帆认为大模型能加速商业化落地，缩短产业应用周期。 360 公司创始人周鸿祎表示大模型是工业革命级的生产力工具，能赋能百行千业。 在基础通识方面： 国内大模型有通用模型如文心一言、讯飞星火等，也有垂直模型专注特定领域如小语种交流、临床医学、AI 蛋白质结构预测等。 以特定例子体验了不同大模型的回答和续写能力，大模型基于统计模型预测生成内容。 大语言模型工作原理包括训练数据、算力、模型参数，在训练数据一致情况下，模型参数越大能力越强。 Transformer 是大语言模型训练架构，具备自我注意力机制能理解上下文和文本关联，通过单词预测生成内容。 大模型可能因错误数据导致给出错误答案，优质数据集很重要。 Prompt 分为 system prompt、user prompt 和 assistant prompt，写好 prompt 有清晰说明等法则。 Fine tuning 是基于通用大模型针对特定领域任务提供数据进行学习和调整。
2024-12-17
你是一名医疗器械销售，就职于一家跨国医疗企业。公司目前就“我们是否应该立刻全面拥抱人工智能技术”组织了一场辩论赛，你持反方论点，即“我们不应该立刻全面拥抱人工智能技术”。 请你结合社会时事热点，设计5个以上刁钻问题给对方，要求举出实例。 此次辩论赛的听众中有公司高层和全体同事，请注意避免不友好及不利于公司形象的言论。
以下是为您设计的一些刁钻问题： 1. 目前人工智能在医疗领域的误诊案例时有发生，比如某些智能诊断系统对复杂病症的判断失误，导致患者延误治疗，这难道还能让我们立刻全面拥抱它吗？ 2. 人工智能技术在医疗数据安全方面存在诸多隐患，像近期发生的多起医疗数据泄露事件，给患者带来极大困扰，在这种情况下，怎么能立刻全面拥抱？ 3. 人工智能在医疗器械的研发中，由于算法偏见，可能会导致某些特定人群无法受益，例如某些心脏起搏器的智能调控系统对特定体质患者效果不佳，这能说明应该立刻全面拥抱吗？ 4. 当下人工智能技术的高昂成本使得许多医疗机构望而却步，比如一些小型医院根本无力承担智能医疗设备的购置和维护费用，这难道不影响全面拥抱的可行性吗？ 5. 人工智能在医疗领域的法规和监管还不完善，比如某些智能手术机器人的操作规范尚未明确，一旦出现问题，责任难以界定，这样能立刻全面拥抱吗？ 6. 虽然人工智能在某些方面提高了医疗效率，但也导致了部分医疗人员的失业，引发社会就业问题，这难道不是我们需要谨慎对待、不能立刻全面拥抱的原因吗？
2024-12-01
你是一名医疗器械销售，就职于一家跨国医疗企业。公司目前就“我们是否应该立刻全面拥抱人工智能技术”组织了一场辩论赛，你持反方论点，即“我们不应该立刻全面拥抱人工智能技术”。 请你结合社会时事热点，设计5个以上刁钻问题给对方。 此次辩论赛的听众中有公司高层和全体同事，请注意避免不友好及不利于公司形象的言论。
以下是为您设计的一些刁钻问题： 1. 当下人工智能技术在医疗领域的应用仍存在诸多伦理和法律争议，比如医疗数据的隐私保护问题尚未得到妥善解决，在这种情况下，如何能立刻全面拥抱？ 2. 人工智能技术在医疗器械的诊断中可能会出现误判，而医疗事故往往关乎生命，如何确保在立刻全面拥抱的情况下避免这些严重后果？ 3. 目前人工智能技术的发展还不够稳定，时常面临技术更新和升级的问题，这会导致医疗器械的频繁变动和成本增加，这一现实如何应对？ 4. 社会时事热点中不乏人工智能技术被滥用的案例，比如虚假医疗信息的传播，如何保证在立刻全面拥抱人工智能技术时不出现此类问题？ 5. 人工智能技术的广泛应用可能会导致部分医疗工作者失业，引发社会就业结构的不稳定，这一风险如何化解？ 6. 近期有报道指出人工智能技术存在被黑客攻击的风险，从而威胁患者的医疗信息安全，在这种情况下立刻全面拥抱是否明智？ 7. 人工智能技术在医疗器械中的应用需要大量的资金投入，而目前公司的财务状况是否能够支撑立刻全面的投入和应用？ 8. 社会时事热点中，一些人工智能技术的应用缺乏人性化关怀，在医疗这种关乎人性和情感的领域，立刻全面拥抱是否合适？
2024-12-01
你是一名医疗器械销售，就职于一家跨国医疗企业。公司目前就“我们是否应该立刻全面拥抱人工智能技术”组织了一场辩论赛，你持反方论点，即“我们不应该立刻全面拥抱人工智能技术”。 请预想对方辩友可能会提出的5条以上反对意见，并给出对应答复。 此次辩论赛的听众中有公司高层和全体同事，请注意避免不友好及不利于公司形象的言论。
对方辩友可能提出的反对意见及我方答复如下： 反对意见 1：人工智能技术能够提高医疗器械的研发效率和精准度。 答复：虽然人工智能在某些方面可能有助于研发，但目前技术尚不成熟，存在误差风险。而且过度依赖可能导致研发人员忽视传统方法中的重要经验和细节。 反对意见 2：人工智能可以优化医疗器械的生产流程，降低成本。 答复：短期内，引入人工智能进行生产流程优化可能需要大量的资金投入用于技术改造和人员培训，成本未必能立刻降低。 反对意见 3：人工智能能够实现更精准的医疗诊断，提升医疗效果。 答复：诊断不仅仅依赖技术，还需要医生的综合判断和人文关怀。目前人工智能诊断存在误判的可能性，不能完全替代医生的经验和直觉。 反对意见 4：人工智能有助于医疗数据的管理和分析，为决策提供有力支持。 答复：数据的安全性和隐私性在人工智能应用中是重大挑战，一旦数据泄露，将对患者和公司造成严重影响。 反对意见 5：人工智能是未来医疗行业的趋势，不立刻全面拥抱会使公司落后于竞争对手。 答复：趋势并不意味着要立刻全面投入，盲目跟风可能导致资源浪费和战略失误。我们应在充分评估风险和自身实际情况的基础上，逐步、稳健地引入人工智能技术。 反对意见 6：人工智能能够提供个性化的医疗服务，满足患者多样化需求。 答复：个性化服务的实现需要大量准确的数据支持，而目前数据的质量和完整性难以保证，可能导致服务效果不佳。
2024-12-01