Navigate to WaytoAGI Wiki →
Home/Question List/Question Detail

list of model format

Answer

以下是为您整理的关于模型格式的相关内容：

Tripo AI 模型详情页：

  • 格式提供多种模型文件格式，包括：usd、fbx、obj、stl、glb 。
  • 选择“Download”可下载模型，使用“Refine”进一步精修。

T2V-01-Director 模型：

  • 点选镜头模组后，会将带[]的镜头词插入 Prompt 中。
    • [左摇]表示：单一镜头生效。
    • [左摇,右移]表示：两个镜头运动同时生效。
    • xxx[左摇]，xxx[右移]表示：先发生左摇镜头，后发生右移镜头。

ComfyUI FLUX 模型：

  • FLUX.1 有三个变体：FLUX.1[pro]、FLUX.1[dev]和 FLUX.1[schnell]。
    • FLUX.1[pro]：通过 API 提供，被认为是最强的模型，在指令跟随、视觉质量、图像细节以及多样性方面表现出色。
    • FLUX.1[dev]：具有非商用许可，是从“FLUX.1[pro]”提炼得出。显卡不够的，可以使用 fp8 版本的 flux1-dev-fp8 模型（12GB VRAM 运行）。
    • FLUX.1[schnell]：Flux Schnell 是一个蒸馏的 4 步模型，拥有 Apache 2.0 商用许可，属于 4 步模型，适用于在本地进行部署或者个人使用。
  • 模型链接：
    • FLUX.1[dev]：https://huggingface.co/black-forest-labs/FLUX.1-dev/tree/main
    • FLUX.1[dev fp8]：https://huggingface.co/Kijai/flux-fp8
    • FLUX.1[schnell]：https://huggingface.co/black-forest-labs/FLUX.1-schnell/tree/main
  • 模型与工作流地址：
    • https://pan.quark.cn/s/2797ea47f691
    • https://pan.baidu.com/s/1nV26Fhn3WYBLrg2hSA0_YQ?pwd=cycy
  • 说明文档：https://xiaobot.net/post/8fd64f3f-52d1-4948-824d-5ee0c38e2594
Content generated by AI large model, please carefully verify (powered by aily)

References

Tripo AI入门手册：AI 3D创作，从未如此简单

模型详情页提供了丰富的工具和选项，可以对模型进行编辑和下载等操作。[heading2]1、模型工具[content]四个按钮选项，从左到右：第一个按钮是收藏，第二个按钮是分享，第三个按钮是动态旋转或者暂停，第四个按钮是删除。在模型区域按住鼠标并拖动可以自由旋转模型.[heading2]2、编辑工具[content]Auto Rigging自动绑定骨骼，后续有需要到Blender里做动画的可以使用风格化选项包括：Original（原始风格）Lego（乐高风格）Voxelize（像素化风格）Voronoi（沃罗诺伊图风格）Custom设置可根据特定软件或用途进行定制，包括：Babylon3ds Max3D printingCinema 4DGodotHoudiniiOSRetopologize提供不同精度的拓扑网格选项：llow（低）med（中）high（高）Format提供多种模型文件格式:usdfbxobjstlglb选择“Download”可下载模型使用“Refine”进一步的精修

T2V-01-Director 模型使用教程 副本

点选镜头模组后，会将带[]的镜头词插入Prompt中[左摇]表示：单一镜头生效。[左摇,右移]表示：两个镜头运动同时生效；xxx[左摇]，xxx[右移]表示：先发生左摇镜头，后发生右移镜头。点选注意事项：尽量靠近镜头生效处选择。尽量避免下列格式:写实风格[跟随，上摇]，暖色调，一只鸟在飞翔。示例：

ComfyUI FLUX

ComfyUI原生支持FLUX.1有三个变体：FLUX.1[pro]、FLUX.1[dev]和FLUX.1[schnell]1.FLUX.1[pro]：通过API提供，被认为是最强的模型，在指令跟随、视觉质量、图像细节以及多样性方面表现出色。2.FLUX.1[dev]：具有非商用许可，是从“FLUX.1[pro]”提炼得出。显卡不够的,用下面这个模型:fp8版本的flux1-dev-fp8模型（12GB VRAM运行）3.FLUX.1[schnell]：Flux Schnell是一个蒸馏的4步模型,拥有Apache 2.0商用许可，属于4步模型，适用于在本地进行部署或者个人使用。模型链接FLUX.1[dev]https://huggingface.co/black-forest-labs/FLUX.1-dev/tree/mainFLUX.1[dev fp8]https://huggingface.co/Kijai/flux-fp8FLUX.1[schnell]https://huggingface.co/black-forest-labs/FLUX.1-schnell/tree/main模型比较大,下载慢的可以从网盘里下.模型与工作流地址https://pan.quark.cn/s/2797ea47f691https://pan.baidu.com/s/1nV26Fhn3WYBLrg2hSA0_YQ?pwd=cycy说明文档https://xiaobot.net/post/8fd64f3f-52d1-4948-824d-5ee0c38e2594

Others are asking
ChatGPT has a significant effect on information retrieval
以下是关于 ChatGPT 对信息检索影响的相关内容： 1. 存在能联网检索的 AI，如 ChatGPT Plus 用户可开启 web browsing 功能实现联网。 2. 还有 Perplexity，它结合了 ChatGPT 式的问答和普通搜索引擎的功能，允许用户指定希望聊天机器人在制定响应时搜索的源类型。 3. Bing Copilot 作为 AI 助手，可简化在线查询和浏览活动。 4. 像 You.com 和 Neeva AI 等搜索引擎，提供基于人工智能的定制搜索体验，并保持用户数据的私密性。 5. 这些 AI 搜索工具的出现标志着信息检索领域的重要发展，结合 AI 技术和搜索引擎，大幅提升数据集命中预期，为实际应用带来更多可能性。 6. 利用 Chat GPT 生成 AI 画图工具的提示词，以及生成电影剧本、产出提示词生成电影分镜等。 7. ChatGPT 某种程度上对搜索引擎可能是致命性的打击，能让用户获取更加精准和有针对性的搜索结果。它还可作为 API 访问，执行一些与其他编排框架相同的功能，如抽象出对定制提示的需求、维持状态，并通过插件、API 或其他来源检索上下文数据，最终可能成为即时构建的可行、简单的替代方案。 请注意，以上内容由 AI 大模型生成，请仔细甄别。
2024-10-10
how AI helps in the field of life science engineering and informatics, and which roles it plays in our research and innovation.请用中文和英文回答
中文回答： 人工智能在生命科学工程和信息学领域发挥着重要作用。例如，DeepMind 开发的 AI 技术能够预测几乎所有已知蛋白质的结构，这将加速科学研究和救命药物的开发，在对抗疟疾、抗生素耐药性和塑料垃圾等方面帮助科学家取得巨大进展。随着人工智能的发展，它能够扩大熟练劳动力或提升低技能劳动力的水平，例如可以提出答案或创意，让经过训练的人类选择最佳答案，筛选结果并跳过错误答案，自然地整合到现有的工作流程中。在合适的条件下，人工智能将改变生活的各个方面，刺激经济，创造新的就业机会并改善工作场所。 英文回答： Artificial intelligence plays significant roles in the field of life science engineering and informatics. For instance, an AI technology developed by DeepMind can predict the structure of almost every known protein to science, which will accelerate scientific research and the development of lifesaving medicines. It has already helped scientists make huge progress in combating malaria, antibiotic resistance, and plastic waste. As AI develops, it can expand the skilled labor force or enhance the level of lowskilled labor. For example, it can propose answers or ideas, allowing trained humans to select the best ones, filter the results and skip incorrect answers, and integrate naturally into the existing workflow. Under the right conditions, AI will transform all areas of life, stimulate the economy, create new jobs and improve the workplace.
2024-08-26
how AI helps in the field of life science engineering and informatics, and which roles it plays in our research and innovation.请用中文描述一遍，英文描述一遍
中文描述： 用户询问：人工智能如何在生命科学工程和信息学领域发挥作用，以及它在我们的研究和创新中扮演何种角色。 英文描述： Quary: How AI helps in the field of life science engineering and informatics, and which roles it plays in our research and innovation. 以下是为您找到的相关内容： 1. 人工智能（AI）已经在带来广泛的社会效益，从医疗进步到缓解气候变化。例如，DeepMind（一家英国企业）开发的一项 AI 技术现在能够预测几乎每种已知科学的蛋白质结构。这一突破将加速科学研究和救命药物的开发，已经帮助科学家在对抗疟疾、抗生素耐药性和塑料垃圾方面取得巨大进展。 2. 英国科学技术框架将 AI 列为五项关键技术之一，并指出监管在为 AI 创造繁荣环境方面的作用。在适当的条件下，AI 将改变生活的所有领域，并通过释放创新和提高生产力来刺激英国经济，创造新的就业机会并改善工作场所。 3. 相关法案提到支持跨多个机构和组织的跨学科研究和开发，包括物理学、工程学、数学科学、计算机和信息科学、机器人学、生物和认知科学、材料科学、社会和行为科学、网络安全和技术伦理等与人工智能研究和相关学科。
2024-08-26
how AI helps in the field of life science engineering and informatics, and which roles it plays in our research and innovation.
AI 在生命科学工程和信息学领域具有多方面的助力和重要作用，主要体现在以下几个方面： 1. 提升劳动力水平：随着人工智能的发展，它能够扩大熟练劳动力或提升低技能劳动力的水平。例如，可以提出答案或创意，让经过训练的人类选择最佳答案，筛选结果并跳过错误答案，自然地整合到现有的工作流程中。 2. 推动行业转变：生命科学和医疗保健领域正越来越多地受到工程技术的推动而发生转变。在生命科学领域，基因编辑、细胞生物学、干细胞、机器人实验等方面的进展使科学家能够以前所未有的方式操纵生物学，且随着人工智能嵌入生命科学实验中，存在着强大的反馈循环。医疗保健领域也在利用技术经历复兴，朝着价值导向的付费模式转变，为人工智能创造了深层次的效用。 3. 助力新疗法开发：在理解生物学方面，人工智能扮演着关键角色，成为揭示生物学复杂性的推动者。如今已有的关于人类疾病的人工智能模型，指引着更有效的药物的开发路径，能够更快地进入市场，并减少失败的次数，使研究超越当前主要依赖实验室人力劳动偶然发现的模式。 但也要注意潜在的担忧，早期人工智能模型在人类收集的数据上进行训练可能存在嵌入的偏见和其他失败。随着人工智能应用于新的行业，科学家、医疗保健提供者和监管机构需要保持警惕，以防止潜在的有害副作用。
2024-08-26
有沒有可以做OCR和formatting的AI 工具？
目前市面上有多种AI工具可以进行OCR（光学字符识别）和格式转换，以下是一些可用的工具： 1. 白描网页版OCR：提供在线图片文字提取服务，支持JPG/PNG/BMP/GIF/SVG格式的图片，并允许用户通过选择或拖拽图片到网页上进行文字识别 。 2. AI文字识别（OCR）工具：这是一个免费的在线OCR工具，支持中英文及数字的识别，并且基于浏览器运行，确保文件安全。用户可以通过选择图片来识别图像中的文本，并将其转换为可编辑的文本 。 3. iLoveOCR：这是一个在线OCR工具，可以将扫描的文档和图像转换成可编辑的Word、PDF、Excel、PowerPoint、ePub和Txt格式。支持多语言识别，并保证用户上传的文件在24小时后自动删除，注重隐私保护 。 4. 轻闪PDF OCR：提供在线服务，允许用户将PDF和图像文件转换成可编辑的格式，支持25种语言的OCR识别，并且界面简洁无广告，注重用户文件的安全性 。 这些工具通过AI技术提高了文字识别的准确性和效率，适用于将图片或PDF文件中的文字转换成可编辑的格式，非常适合需要大量文档处理和数据转换的用户。
2024-07-14
不好量化反馈的领域怎么设计reward model
在不好量化反馈的领域设计 reward model 可以参考以下方法： 推测 OpenAI 可能已经找到了一些非数理学科的 Reward 定义方法，并将这个方法通过 RL 拓展到更多领域。针对不好量化的领域，可以通过写一些文字类的判断标准或规则，让大模型读懂并遵循它，以此来作为是否给予 Reward 的标准，符合标准则 Reward 高，否则 Reward 低。例如，针对写作文，可以列出好文章的标准（结构清晰、文笔优美等规则），让大模型据此来给 Reward，如此就能拓展到很多领域。 可能需要分步骤，先用好给 Reward 的数理问题增强模型的复杂推理能力到一定层级，使其能看懂规则，然后再做那些不好量化 Reward 的领域。 需要注意的是，以上部分内容是猜测，没有依据。同时，ChatGPT 在进行 RLHF 时也存在一定的局限性，其思想还是基于符号 tokenize 在语言交互的范畴上来完成 RL 的，并通过额外训练一个 Reward Model 来进行奖励的反馈。
2025-02-21
big model页面如何进入
以下是关于进入 big model 页面的相关信息： 1. 模型下载： 大多数模型可在 Civitai（C 站）下载，网址为：https://civitai.com/ 。 使用 C 站的方法： 科学上网（自行解决）。 点击右上角筛选按钮，在框中找到所需模型类型，如 Checkpoint=大模型、LoRA=Lora 。 看照片，感兴趣的点进去，点击右边“Download”保存到电脑本地。还可点击左上角“Images”，找到喜欢的图片点进去，查看全部信息，点击 Lora 和大模型可直接跳转到下载页面。复制图片信息可点击最下面“Copy...Data”。 2. 模型下载位置： 大模型：SD 根目录即下载 SD 时存放的文件夹。 Lora 和 VAE 也有相应的存放位置。 3. 分辨模型类型： 若不知下载的模型类型及应放的文件夹，可使用秋叶的模型解析工具 https://spell.novelai.dev/ ，将模型拖动到空白处即可自动弹出模型信息。 此外，还有关于 Lora 生图的步骤和 Llama3 部署的相关内容： 1. Lora 生图： 点击预览模型中间的生图会自动跳转页面。 可调节模型强度，建议在 0.6 1.0 之间。 能添加 lora 文件，显示训练过的所有 lora 的轮次。 输入正向提示词，选择生成图片数量、尺寸等。 采样器和调度器新手可默认，迭代步数在 20 30 之间，CFG 在 3.5 7.5 之间调整。 随机种子 1 代表随机生成图，复制好的随机种子可粘贴以生成近似结果。 合适的种子和参数可进行高清修复，选择放大倍数等。 2. Llama3 部署： 下载大模型可用于推理，有使用 API 和部署简单界面两种对话方式。 面向小白，可参考部署 webdemo 服务的代码，在/root/autodltmp 路径下新建 chatBot.py 文件并输入相应内容，启动 Webdemo 服务，在终端运行命令，将端口映射到本地，在浏览器中打开链接 http://localhost:6006/ 即可看到聊天界面。
2024-12-11
Error occurred when executing IPAdapterAdvanced: insightface model is required for FaceID models File "D:\AI\comfyui_20240421\execution.py", line 151, in recursive_execute output_data, output_ui = get_output_data(obj, input_data_all) File "D:\AI\co
以下是针对您所遇到的报错问题的一些解决建议： 1. 对于 ipadater 部分报错说 model 不存在的情况，将文中画圈部分修改调整到不报错。Pulid 部分，除了下载好对应的节点以及参考官方网站最下面的安装对应要求外，还要注意上图中的第二要点，对应安装一些内容，具体要求可查看云盘中命名为“pulid 插件模型位置.png”的文件及对应的云盘链接：PulID 全套模型，链接:https://pan.baidu.com/s/1ami4FA4w9mjuAsPK49kMAw?pwd=y6hb，提取码:y6hb。否则将会遇到报错：Error occurred when executing PulidEvaClipLoader。 2. 对于 Ollama 大模型部分，为了应对没下载大模型带来的报错，需要下载大模型。首先，下载 ollama，网站： 。 3. 如果缺少 ipadapter 的模型，可去这个网址下载：https://github.com/cubiq/ComfyUI_IPAdapter_plus 。如果遇到“Error occurred when executing IPAdapterUnifiedLoader:ClipVision model not found.......”类似的报错，可在这个网址里找到多个关于 IPAdapter 报错的解决办法：https://github.com/cubiq/ComfyUI_IPAdapter_plus/issues/313 。 另外，换脸工作流的核心组件是 Apply InstantID Advanced 节点，这个节点的作用就是将源人脸替换到目标图像中。其中，instantID 模型擅长提取图片的高层次特征，包括面部的纹理信息、几何结构、风格特征等，在图中例子是 IPAdpater，用于识别和保留目标图像 image_kps 的风格并迁移到生成图像中。instantID Face Analysis 节点用于提取人脸五官的特征向量，作用是使生成图像时，人脸的眼睛、鼻子、嘴巴等样子仍然符合源人脸 image 的特征。controlnet 模型的作用是识别目标图像 image_kps 的低层次特征，包括骨架、姿势、边缘、结构。controlnet 模型和 instantID 模型起到不同的控制作用，结合使用可以达到将源人脸的五官替换目标图像中五官的效果。
2024-09-03
How Al Agentic workflows could drive more Al progress than even the next generation of foundation models
以下是关于您提出的“ How Al Agentic workflows could drive more Al progress than even the next generation of foundation models ”问题的相关信息： 吴恩达认为人工智能代理工作流程将在今年推动人工智能的巨大进步，甚至可能超过下一代基础模型。构建代理的设计模式框架包括反思、工具使用、规划和多代理协作。反思是指 LLMs 审视自身工作并提出改进方法；工具使用是指赋予 LLMs 如网络搜索、代码执行等工具以帮助其收集信息、采取行动或处理数据；规划是指 LLMs 制定并执行多步骤计划以实现目标；多代理协作则涉及多个 AI 代理共同工作，通过分工、讨论和辩论来提出比单个代理更好的解决方案。这些设计模式为构建高效的 AI 代理提供了指导，并将在下周进一步详细阐述并提供相关阅读建议。 此外，在医疗保健领域，为了产生真正的改变，AI 需要像我们一样学习。必须让这些专家 AI 接触到顶级从业人员的多样化视角，以避免复制危险的偏见。鉴于人工智能依赖的神经网络基础，这些专家 AI 可能通过元学习（或学会学习）比我们预期的更快地获得知识，并带着我们人类一同进步。 在 AI 进化方面，CNN 的结构基于两类细胞的级联模型，主要用于模式识别任务，在计算上比大多数其他架构更有效、更快速，在许多应用中，包括自然语言处理和图像识别，已经被用来击败大多数其他算法。我们每次对大脑的工作机制的认知多一点，神经网络的算法和模型也会前进一步。
2024-09-02
Rerank Model
重排通常是通过专门的 Rerank 模型来实现的。例如在一些研究中，如基于 Notion 和 Coze 打造个人知识问答系统，提到若不考虑速度和成本，最好的语义相关度计算算法就是 LLM 本身，所以直接使用 LLM 来做打分和重排。在大模型 RAG 问答的行业最佳实践中，如 Baichuan 案例，对于 Rerank 和 selection 的作用范围存在一定的不确定性，合理猜测是对全部 Material 进行重排序和筛序。
2024-08-29
reward model
奖励模型（Reward Model）相关内容如下： 在训练 GPT 助手方面，对于奖励模型，需要将提示排成行，提示在三行中相同，但完成项不同。黄色的 token 来自 SFT 模型，在最后添加特殊的奖励读出 token，监督单个绿色 token 的 transformer，它会预测完成项的质量。做出预测后，根据模型对完成项的排名与来自人类承包商的比较事实数据制定损失函数，训练模型使其做出与比较事实数据相一致的奖励预测，从而能够评估提示的完成程度。 此外，关于盈利模式，比如在菠萝作词家平台，可以提供不同级别的订阅套餐，包括基础套餐和高级套餐，分别提供不同服务。还可以与音乐制作人等建立项目合作关系，按项目费用或作品分成获取收益。对于优秀歌词作品，平台可与创作者分享版权收益。也能吸引音乐相关品牌及广告商入驻，通过展示广告、品牌联名等增加收入，或为品牌定制专属歌词内容。最后可以开设线上或线下的歌词创作培训课程。 在 GPT 模型方面，开发者上架经过审核和筛选的 GPT 模型，可获得曝光和赚取收益，虽然官方未公开详细盈利模式，但可能包括多种方式。
2024-08-19