OpenAI 的产品具有以下特点和发展情况:
去年11月之前,人们对OpenAI的了解主要局限于技术和软件开发领域。但现在全世界都知道,OpenAI在当月晚些时候发布了一款基于GPT-3.5最新版本的消费级产品。几个月来,公司内部一直在使用带有对话界面的GPT版本。这对于该公司所谓的“寻求真相”尤为重要。这意味着,通过对话,用户可以哄骗模型提供更可信、更完整的回答。为大众而优化的ChatGPT可以让任何人只需输入提示信息,就能立即利用似乎无穷无尽的知识源,然后继续对话,就像与一个碰巧无所不知的人类同伴闲聊一样,尽管他也有捏造事实的嗜好。在OpenAI内部,对于是否应该发布这样一款功能空前强大的工具,人们争论不休。但Altman对此表示支持。他解释说,这次发布是一项战略的一部分,旨在让公众适应AI注定会改变他们日常生活的现实,而且可能是为了更好地生活。在公司内部,这被称为“迭代部署假设”。当然,ChatGPT会引起轰动。毕竟,这是一个任何人都能使用的东西,它足够聪明,能在SAT考试中获得大学水平的分数,能写出B-minus的作文,还能在几秒钟内总结出一本书的内容。你可以让它为你撰写融资提案或会议摘要,然后要求它用立陶宛语、莎士比亚十四行诗或痴迷玩具火车的人的口吻进行改写。几秒钟后,大型语言模型就会满足你的要求。太疯狂了。不过,OpenAI将其视为其更新、更连贯、能力更强、更可怕的后继者GPT-4的台标,据说GPT-4是用1.7万亿个参数训练出来的。(OpenAI不会证实这个数字,也不会透露数据集)。
💎Sam Altman谈OpenAI计划:上周,Sam Altman和20名开发者一起讨论OpenAI的API和产品计划。Sam非常坦率,讨论涉及到实际的开发者问题,以及与OpenAI使命和AI社会影响相关的更大范围问题。以下是主要的观点:1.OpenAI目前严重受限于GPU在整个讨论中,一个常见的主题是OpenAI目前极度依赖GPU,这推迟了他们许多短期的计划。最大的客户投诉是关于API的可靠性和速度。Sam承认了他们的担忧,并解释说大部分问题是由于GPU短缺导致的。更长的32k上下文还不能推广给更多的人。OpenAI还没有克服注意力的O(n^2)扩展,所以虽然他们看起来有可能很快就会有100k-1M的标记上下文窗口(今年),但任何更大的窗口都需要一个研究突破。微调API目前也受到GPU可用性的限制。他们还没有使用像Adapters或LoRa这样的高效微调方法,所以微调非常耗费计算资源来运行和管理。未来会有更好的微调支持。他们甚至可能会托管一个由社区贡献的模型的市场。专用容量的提供受到GPU可用性的限制。OpenAI也提供专用容量,这为客户提供了模型的私有副本。要获得这项服务,客户必须愿意预先支付100k美元。🍀Sam同时分享了OpenAI近期路线2023:更便宜、更快的GPT-4——这是他们的首要任务。一般来说,OpenAI的目标是尽可能地降低"智能的成本",因此他们将努力继续降低API的成本。更长的上下文窗口——在近期,高达100万标记的上下文窗口是可行的。微调API——微调API将扩展到最新的模型,但具体形式将由开发者指示他们真正想要什么。有状态的API——当你今天调用聊天API时,你必须反复通过同样的对话历史,并反复支付同样的标记。未来,API将有一个能记住对话历史的版本。
《[全网最细!扒开OpenAI背后的理想主义大旗](https://www.bilibili.com/video/BV1BPCUY2Eir/)》来自林亦的视频,视频深入剖析了OpenAI从理想主义走向商业化的历程,包括人才流失与融资成功的割裂现象,背后的股权架构、内部矛盾及未来发展的不确定性。OpenAI这家曾经志在保障AI安全、主张开源、开放自己家研究成果的理想主义公司,真的也走上了屠龙少年成为恶龙的悲剧道路了吗?[heading3]10月19日[content]《[10月AI新产品盘点,大家都做的太酷辣!](https://mp.weixin.qq.com/s/38qygInbWpga2vH85dRD9A)》本期介绍四款创新AI产品:1.有挂:浏览器插件,用户可用自然语言编程,满足个性化网页需求。2.陌生人闹钟:每天早晨由陌生人叫醒,利用AI监督语音内容,带来惊喜。3.歌词爆改机:通过AI为热门歌曲改编歌词,创造全新版本。4.EVE:AI 3D伴侣,进入陪伴与游戏结合的新领域。