以下是目标检测领域的一些最新模型:
[title]OpenAI联创:RLHF是超级智能的秘密武器[heading1]模型将解锁哪些新能力?Dwarkesh Pa tel:从宏观角度来看,pre-training和post-training的主要任务分别是什么?二者的主要区别是?John Schulman:pre-training阶段主要是让模型学习互联网上的网页、代码等等各种内容,并且让模型做到能模仿这些内容,模型在预训练后已经能生成很仿真的网页。同时这个模型还需要做最大化对数概率(maximize log probability)的训练,主要是为了让模型能在给定一系列token之后准确地预测下一个token。因为我们的训练目标是最大化这些预测的对数概率,所以这个模型在概率分配上会非常精确。也就是说,它不仅可以生成网络上的各种内容,还能为这些内容赋予相应的概率值。pre-training阶段后的基础模型能够扮演各种角色,生成多种不同类型的内容。进入到post-training阶段之后,我们通常就会针对一个更具体的应用场景进行优化,比如让模型做聊天助手。在这个场景下,模型的目标不再是简单地模仿一个人,而是要能够回答用户的问题或执行用户的指令,提供帮助。我们优化的目标也变成了生成用户会喜欢并且觉得有用的输出,而不仅仅是复制网络上的原始内容。是GPT-4.5和GPT-5比预期的来得慢,之前以为Claude-3发布之后OpenAI就会发新模型了,但现在SOTA模型已经易主一个月了,所以AGI的战线可能会被拉长。第二点是Sora比预期来的要早,这意味着今年大家对多模态的理解和生成的进步幅度都会很大,将会解锁很多新东西,但多模态能不能带来智能和AGI还是一个很强的非共识。第三点就是Elon Musk加入了开源,开源模型能力的水位线会被提升很多,xAI的人才密度很强,GPU也足,这会决定了很多后面模型公司的生死线。
[title]Sora:大型视觉模型的背景、技术、局限性和机遇综述【官方论文】[heading1]1引言自从2022年11月ChatGPT发布以来,人工智能技术的出现标志着一个重大的转变,重塑了交互方式,并深入融入日常生活和行业的各个方面[1,2]。基于这一势头,OpenAI在2024年2月发布了Sora,一个文本到视频的生成式AI模型,能够根据文本提示生成现实或想象场景的视频。与之前的视频生成模型相比,Sora的特点是能够在遵循用户文本指令的同时,生成长达1分钟的高质量视频[3]。Sora的进步体现了长期以来人工智能研究任务的实质,即赋予AI系统(或AI代理)理解和与运动中的物理世界互动的能力。这涉及到开发不仅能解释复杂用户指令,而且能将这种理解应用于通过动态和富有上下文的模拟解决现实世界问题的AI模型。图2:Sora在文本到视频生成中的示例。文本指令被给予OpenAI Sora模型,它根据指令生成三个视频。Sora展示了准确解释和执行复杂人类指令的显著能力,如图2所示。该模型能生成包含多个执行特定动作的角色以及复杂背景的详细场景。研究人员将Sora的熟练程度归因于不仅处理用户生成的文本提示,而且还能辨别场景内元素之间复杂的相互作用。Sora最引人注目的方面之一是其生成长达一分钟的视频的能力,同时保持高视觉质量和引人入胜的视觉连贯性。与只能生成短视频片段的早期模型不同,Sora的一分钟长视频创作具有进展感和从第一帧到最后一帧的视觉一致性之旅。此外,Sora的进步在于其生成具有细腻运动和互动描绘的扩展视频序列的能力,克服了早期视频生成模型所特有的短片段和简单视觉呈现的限制。这一能力代表了AI驱动创意工具向前的一大步,允许用户将文本叙述转换为丰富的视觉故事。总的来说,这些进步展示了Sora作为世界模拟器的潜力,为描绘场景的物理和上下文动态提供了细腻的见解。[3]。
[title]XiaoHu.AI日报[heading2]2月21日🔗 https://x.com/xiaohuggg/status/1760191358298710370?s=205⃣️🎯 YOLOv8目标检测跟踪模型:快速准确的多对象识别和定位。支持实例分割、人体姿态估计等。多平台兼容,一站式视觉识别解决方案。🔗详细介绍:https://docs.ultralytics.com/models/🔗 GitHub:https://github.com/ultralytics/ultralytics🔗 https://x.com/xiaohuggg/status/1760149057249636570?s=206⃣️🎥 Sora工作原理解析:结合扩散模型和Transformer架构。采用空间时间补丁和时空立方体。利用知识图谱组合视频,显示巨大潜力。🔗 https://x.com/xiaohuggg/status/1760139842783248609?s=207⃣️🚀 OpenAI技术人员的一天...🔗 https://x.com/xiaohuggg/status/1760130189932265553?s=20