Navigate to WaytoAGI Wiki →
Home/Question List/Question Detail

有java scala hadoop spark flink开发经验员工入门AI 学习提纲以及对应学习内容

Answer

以下是为有 Java、Scala、Hadoop、Spark、Flink 开发经验的员工提供的 AI 入门学习提纲及对应学习内容：

  1. 学习资源推荐：
    • 系统化学习：观看李弘毅老师的生成式 AI 导论、吴达的生成式 AI 入门视频等，并整理学习笔记与大家交流互动。
    • 社区共创学习：参与社区共创活动，通过做小项目反向推动学习。
    • 参考资料：A16Z 推荐的 AI 相关原理内容，包括 GPT 相关知识、Transformer 模型运作原理、大语言模型词语接龙原理等基础知识。
    • 官方 cookbook：open AI 的官方 cookbook，小琪姐做了中文精读翻译。
    • 历史脉络资料：整理 open AI 的发展时间线、万字长文回顾等。
  2. 学习路径：
    • 从提示词开始学习与各类模型的对话，了解其重要性和结构化提示词的优势。
    • 学习过程中可以先从国内模型工具入手，不花钱，若想进阶再考虑高阶方向。
  3. 其他学习方式：
    • 创作者将内容做成可视化形式，后续会发到群里。
    • 上传相关 PPT 用作参考。
    • 从温达、李弘毅老师课程等学习入门。
    • 了解时代杂志评选的百位领军人物。
    • 学习 AI 相关名词解释，如 AGI、AIGC、agent、prompt 等，可通过与 AI 对话或李继刚老师的课程来理解。
    • 订阅赛博蝉星公众号、国外优质博主的 blog 或 Twitter 等获取最新信息并投稿。
    • 参与社区活动，如 AIPU、CONFIUI 生态大会、每月的切磋大会、新活动 AIPO 等。
Content generated by AI large model, please carefully verify (powered by aily)

References

01-通往AGI之路知识库使用指南

[heading2]智能章节本章节提到了AIPO与config UI的生态大会，社区活动将在此呈现。每月底有切磋大会，现把主题给到高校发起了AIPO活动。此外还有学习路径，有很多高质量学习内容，如李弘毅老师的生成式AI导论、吴达的生成式AI入门视频等供有时间深入学习的人使用。[45:27](https://waytoagi.feishu.cn/minutes/obcn7mvb3vu6k6w6t68x14v5?t=2727000)推荐系统化学习方式及社区共创学习本章节推荐了两种学习方式，一是像部分同学那样观看李弘毅的导论、文达的相关信息并整理成学习笔记，在整理过程中可学到更多知识，还能与大家交流互动；二是觉得系统学习枯燥的话，可以等待社区共创内容，通过共创做小项目来反向推动学习。[46:46](https://waytoagi.feishu.cn/minutes/obcn7mvb3vu6k6w6t68x14v5?t=2806000)分享AI学习路径、方法，推荐A16Z推荐的AI相关原理内容本章节原子将分享30分钟快速体验AI工具并教爸妈理解相关内容。提到每个同学有自己的学习路径和方法，欢迎分享。还介绍了A16Z推荐的内容从5篇扩展到6篇，包括GPT相关知识、Transformer模型运作原理，及大语言模型词语接龙原理等基础知识。[49:02](https://waytoagi.feishu.cn/minutes/obcn7mvb3vu6k6w6t68x14v5?t=2942000)Stable Diffusion运作原理与GPT训练现状

01-通往AGI之路知识库使用指南

[heading2]智能章节本章节提到若想深入学习内容可查看官方cookbook，还有创作者将内容做成可视化形式，后续会发到群里。另外整理了open AI的发展时间线、万字长文回顾等历史脉络内容，入门经典必读和面向开发者的文章值得阅读，欢迎上传相关PPT用作参考。[55:39](https://waytoagi.feishu.cn/minutes/obcn7mvb3vu6k6w6t68x14v5?t=3339000)学习过程中账户投资，可先从国内模型工具入手本章节AJ提出某些内容直接拿去可能有问题，提到了于一同学，并表示要更新过学习过程中账户投资金额相关内容。还指出学习可以先从国内模型工具入手，不花钱，若想进阶再考虑高阶方向，若想深入学习美学概念和操作可报野菩萨课程，那是AJ的启蒙老师。[56:40](https://waytoagi.feishu.cn/minutes/obcn7mvb3vu6k6w6t68x14v5?t=3400000)国内大语言模型工具好用，学习从提示词开始本章节主要提到若想深入使用某些工具可能需支出费用，但国内新工具已好用。接着要跟大家讲解prompt怎么写，会收录经典结构，强调与模型对话时要把话说清。还提及可从温达、李弘毅老师课程等学习入门，但与大语言模型相关建议从提示词开始。[58:08](https://waytoagi.feishu.cn/minutes/obcn7mvb3vu6k6w6t68x14v5?t=3488000)提示词在与各类模型对话中的重要性及结构化提示词的优势

01-通往AGI之路知识库使用指南

[heading2]总结关于AI知识库使用及AIPO活动的介绍：讨论了AI知识库的使用情况、AIPO活动的发起背景、内容安排及相关资源等。AIPO线下活动及AI相关探讨：讨论了AIPO线下活动的规则和玩法，以及AI在科技发展中的重要地位和相关研究方向。way to AGI社区活动与知识库介绍：讨论了way to AGI社区活动的安排、材料准备以及知识库的使用和相关内容更新等情况。关于AI知识库及学习路径的介绍时代杂志评选的领军人物：去年时代杂志评出了百位领军人物。AI相关名词解释：包括AGI、AIGC、agent、prompt等，建议通过与AI对话或李继刚老师的课程来理解。知识库的信息来源：有赛博蝉星公众号、国外优质博主的blog或Twitter等，推荐大家订阅获取最新信息并投稿。社区共创项目：如AIPU、CONFIUI生态大会，每月有切磋大会等活动，还发起了新活动AIPO。学习路径：有李弘毅老师的生成式AI导论等高质量学习内容，可系统化学习或通过社区共创活动反推学习，鼓励整理学习笔记并分享交流。经典必读文章：如介绍GPT运作原理、Transformer模型、扩散模型等的文章，还包括软件2.0时代相关内容。初学者入门推荐：推荐看open AI的官方Cookbook，小琪姐做了中文精读翻译，也可查看cloud的相关内容。历史脉络类资料：整理了open AI的发展时间线和万字长文回顾等。

Others are asking
大模型在软件开发公司（主java+vue）的应用场景有哪些
大模型在以 Java 和 Vue 技术为主的软件开发公司中，具有以下一些应用场景： 1. 代码自动生成：大模型可以根据需求描述生成 Java 或 Vue 的代码片段，提高开发效率。 2. 代码优化建议：分析现有代码，提供优化的建议和策略，提升代码质量。 3. 智能错误检测与修复：快速识别代码中的错误，并提供可能的修复方案。 4. 需求分析与理解：帮助更好地理解和梳理复杂的业务需求，转化为技术实现的思路。 5. 自动化测试用例生成：根据代码和需求生成有效的测试用例，提高测试效率和覆盖度。 6. 技术选型辅助：在面临新的项目或技术难题时，提供相关技术选型的参考和建议。
2025-02-06
35岁java后端开发如何转型AI开发
对于 35 岁的 Java 后端开发人员转型 AI 开发，以下是一些建议： 1. 利用固定格式文档结合 AI 进行代码开发时，要强调组员的主观能动性，让他们自主设计，组长负责引导和经验分享。文档并非唯一最佳方式，可尝试用简短描述或 Prompt 辅助代码生成。在 AI 编程中，设计非常重要，模块化低耦合设计和清晰的上下文对代码生成效果尤为关键。参考链接： 2. 借助 AI 编程工具（如 Cursor），熟悉 LLM 原理，探索复杂 Prompt 和定制化规则。开展 LLM 相关的 Side Project（如翻译工具、AI 对话应用等），通过实践快速掌握技能。将 AI 当老师，边做边学，获取即时反馈，持续提升。核心建议是行动起来，找到正反馈，坚持使用 AI 辅助编程。参考链接：
2025-01-29
Java 程序员如何从 0 到 1 开发微调模型
以下是 Java 程序员从 0 到 1 开发微调模型的步骤和相关信息： 准备工作： 假设您已经按照相关说明准备了训练数据。 使用 OpenAI CLI 进行微调： 1. 明确从哪里 BASE_MODEL 开始的基本模型的名称（如 ada、babbage、curie 或 davinci），您可以使用后缀参数自定义微调模型的名称。 2. 运行相关命令，该命令会执行以下操作： 使用文件 API 上传文件（或使用已经上传的文件）。 创建微调作业。 流式传输事件直到作业完成（这通常需要几分钟，但如果队列中有很多作业或您的数据集很大，则可能需要数小时）。 关于基本模型： 每个微调工作都从一个默认为 curie 的基本模型开始。模型的选择会影响模型的性能和运行微调模型的成本。您的模型可以是 ada、babbage、curie 或 davinci。请访问定价页面了解有关微调费率的详细信息。 微调作业的时间： 开始微调作业后，可能需要一些时间才能完成。在系统中，您的工作可能排在其他工作之后，训练模型可能需要几分钟或几小时，具体取决于模型和数据集的大小。如果事件流因任何原因中断，您可以通过运行特定命令恢复它。工作完成后，它应该显示微调模型的名称。 微调的优势： 1. 比即时设计更高质量的结果。 2. 能够训练比提示中更多的例子。 3. 由于更短的提示而节省了 Token。 4. 更低的延迟请求。 微调的步骤： 1. 准备和上传训练数据。 2. 训练新的微调模型。 3. 使用您的微调模型。 可微调的模型： 微调目前仅适用于以下基础模型：davinci、curie、babbage 和 ada。这些是原始模型，在训练后没有任何说明（例如 textdavinci003）。您还可以继续微调微调模型以添加其他数据，而无需从头开始。 安装建议： 建议使用 OpenAI 命令行界面。要安装这个，运行相关指令（以下说明适用于 0.9.4 及更高版本。此外，OpenAI CLI 需要 python 3）。通过将相关行添加到您的 shell 初始化脚本（例如.bashrc、zshrc 等）或在微调命令之前的命令行中运行它来设置您的环境变量。 此外，还有“大圣：全网最适合小白的 Llama3 部署和微调教程”，其核心代码全部参考如下开源项目： 。该教程有诸多亮点，如教您如何购买算力，手把手教您下载并部署 Llama3 模型，使用甄嬛数据集微调 Llama3 模型等，但不会讲解微调的技术性原理以及文中会用到的 Python 代码，且需要您充值 50 块钱购买算力的预充值。
2025-01-04
我是一个java开发工程师，现在想学习AIGC，请帮我制定一个学习计划，从0到1学习AIGC知识，并提供相关的学习资料
以下是为您制定的从 0 到 1 学习 AIGC 知识的学习计划，并为您提供相关学习资料： 一、学习计划 1. 基础知识学习 了解 AIGC 的基本概念和发展历程。 学习机器学习的基础知识，包括数据获取、特征工程、模型训练、评估与应用等方面。 2. 框架学习 学习 Langchain 框架：了解其丰富的功能，能够根据需求更换模型和实现方式。参考网址：https://python.langchain.com/docs/get_started/introduction.html 掌握 Flask / FastAPI 框架：学习如何与前端或业务后端做接口对接，根据具体场景选择合适的框架。参考网址： FastAPI：https://fastapi.tiangolo.com/zh/ Flask: https://flask.palletsprojects.com/en/2.3.x/ 3. 实践应用 通过实际项目练习，深入理解 AIGC 的应用开发。 二、学习资料 1. 关于机器学习的定义和流程： 卡耐基梅隆大学计算机学院教授汤姆·米切尔（Tom Michell）对机器学习的定义：“计算机程序能从经验 E 中学习，以解决某一任务 T，并通过性能度量 P，能够测定在解决 T 时机器在学习经验 E 后的表现提升” 学习数据获取、特征工程、模型训练、评估与应用等方面的知识。 2. 框架学习资料： Langchain 框架：https://python.langchain.com/docs/get_started/introduction.html Flask 框架：https://flask.palletsprojects.com/en/2.3.x/ FastAPI 框架：https://fastapi.tiangolo.com/zh/ 希望这个学习计划和学习资料对您有所帮助，祝您学习顺利！
2024-08-17
我能用AIAgent，做什么关于Java程序员可用的工具？
AI Agent 是基于大型语言模型（LLM）和其他技术实现的智能实体，其核心功能在于自主理解、规划决策、执行复杂任务。AI Agent 包括以下几个概念： Chain：通常一个 AI Agent 可能由多个 Chain 组成。一个 Chain 视作是一个步骤，可以接受一些输入变量，产生一些输出变量。大部分的 Chain 是大语言模型完成的 LLM Chain。 Router：我们可以使用一些判定（甚至可以用 LLM 来判定），然后让 Agent 走向不同的 Chain。例如：如果这是一个图片，则 a；否则 b。 Tool：Agent 上可以进行的一次工具调用。例如，对互联网的一次搜索，对数据库的一次检索。 总结下来，有三个 Agent： Responser Agent：主 agent，用于回复用户（伪多模态）。 Background Agent：背景 agent，用于推进角色当前状态（例如进入下一个剧本，抽检生成增长的记忆体）。 Daily Agent：每日 agent，用于生成剧本，配套的图片，以及每日朋友圈。 这三个 Agent 每隔一段时间运行一次（默认 3 分钟），期间会分析历史对话，变更人物关系（亲密度、了解度等），变更反感度，如果超标则拉黑用户，抽简对话内容，提取人物和用户的信息成为“增长的记忆体”，按照时间推进人物剧本，并且有概率主动聊天（与亲密度正相关，跳过夜间时间）。 对于 Java 程序员来说，可以利用 AI Agent 中的工具调用功能，例如对相关技术文档的搜索和检索，以辅助解决编程中的问题；也可以借助其分析和理解能力，对代码逻辑进行审查和优化建议等。
2024-08-09
Java学习路线
Java学习路线 Java是一种面向对象的编程语言，广泛应用于开发各种应用程序，包括Web应用程序、移动应用程序、桌面应用程序等。近年来，Java一直是世界上最受欢迎的编程语言之一。 如果您想学习Java，以下是一条建议的学习路线： 1. Java基础 掌握Java的基本语法，包括变量、数据类型、运算符、控制流语句、函数等。 学习面向对象编程的基本概念，包括类、对象、继承、封装、多态等。 熟悉Java集合框架，包括ArrayList、HashMap、HashSet等。 2. Java开发工具 安装并配置Java开发环境，包括JDK、IDE等。 学习使用Java调试工具，如JDWP等。 熟悉Java版本控制工具，如Git等。 3. Java Web开发 学习HTML、CSS和JavaScript等前端开发语言。 学习Servlet、JSP等Java Web开发技术。 熟悉Java Web框架，如Spring MVC、Struts等。 4. Java高级主题 学习多线程编程、网络编程、数据库编程等Java高级主题。 熟悉设计模式，如单例模式、观察者模式、工厂模式等。 学习Java性能优化技巧。 5. 项目实战 参与开源项目或开发自己的Java项目。 不断练习和积累经验，提高Java编程能力。 以下是一些学习Java的资源： 书籍: 《Java编程入门》 《Java核心技术》 《Effective Java》 在线课程: MOOC平台，如Coursera、edX等。 B站、慕课网等视频网站。 社区论坛: Stack Overflow Reddit Java 学习Java需要时间和精力，但只要坚持不懈，就一定能够掌握这门强大的编程语言。
2024-05-09
AI 视频软件
以下是一些 AI 视频相关的软件和方法： 视频工具建议： 方法 0：guahunyo 老师做了个工作流，使用 comfy 工作流，参考 方法 0【Dreamina 深度图出图+出视频】：使用 Dreamina 图片生成功能 https://dreamina.jianying.com/aitool/image/generate ，上传深度图，选择适应画布比例，填写描述 方法 1【MJ 出图+AI 视频软件】：方法作者为迦/小龙问路，使用 Midjourney 垫图➕描述出图，再去视频工具中转成视频。可下载项里的深度图，打开 Midjourney 官网 https://www.midjourney.com/ ，局部重绘有难度，最终方式可分开画，先画个被关着的红衣服女孩，再画个二战德国士兵的背影，再合成后丢给 MJ 方法 2【Dall E3 出图+AI 视频软件】：使用 Dall E 直接描述出图，再去视频工具中转成视频 视频模型：Sora，参考 https://waytoagi.feishu.cn/wiki/S5zGwt5JHiezbgk5YGic0408nBc 工具教程：Hedra，参考 https://waytoagi.feishu.cn/wiki/PvBwwvN36iFob7kqZktcCzZFnxd 应用教程： 视频转绘，参考 https://waytoagi.feishu.cn/wiki/ZjKpwSd5hiy6ZhkiBVHcOBb6n9r 视频拆解，参考 https://waytoagi.feishu.cn/wiki/WeKMwHRTmiVpYjkVdYpcFjqun6b 图片精修，参考 https://waytoagi.feishu.cn/wiki/CfJLwknV1i8nyRkPaArcslWrnle 几个视频 AIGC 工具： Opusclip 可利用长视频剪成短视频 Raskai 可将短视频素材直接翻译至多语种 invideoAI 输入想法>自动生成脚本和分镜描述>生成视频>人工二编>合成长视频 descript 屏幕/播客录制>PPT 方式做视频 veed.io 可自动翻译自动字幕 clipchamp 是微软的 AI 版剪映 typeframes 类似 invideoAI，内容呈现文本主体比重更多 google vids
2025-02-21
最好用的生成 ppt 的 ai 工具
以下是一些好用的生成 PPT 的 AI 工具： 1. MindShow：这是一款 AI 驱动的 PPT 辅助工具，可能提供自动布局、图像选择和文本优化等智能设计功能，目标是简化设计流程，让用户专注于内容表达和创意发挥，还可能包含互动元素和动画效果。网址：https://www.mindshow.fun/ 2. 爱设计 3. 闪击 4. Process ON 5. WPS AI 6. Gamma：在线 PPT 制作网站，允许通过输入文本和想法提示快速生成幻灯片，支持嵌入多媒体格式。网址：https://gamma.app/ 7. 美图 AI PPT：由知名图像编辑软件“美图秀秀”的开发团队推出，允许通过输入简单文本描述生成专业 PPT 设计，包含丰富模板库和设计元素。网址：https://www.xdesign.com/ppt/ 8. 讯飞智文：由科大讯飞推出的 AI 辅助文档编辑工具，利用语音识别和自然语言处理领域技术优势，提供智能文本生成、语音输入、文档格式化等功能。网址：https://zhiwen.xfyun.cn/ 目前市面上大多数 AI 生成 PPT 按照如下思路完成设计和制作： 1. AI 生成 PPT 大纲 2. 手动优化大纲 3. 导入工具生成 PPT 4. 优化整体结构 推荐 2 篇市场分析的文章供参考： 1. 《》 2. 《》
2025-02-21
日常生活怎样利用AI
日常生活中可以通过以下方式利用 AI： 信息收集与整理：早晚速读朋友圈的文章，学习如何有效地收集、整理和检索信息，打造个人知识库。 编程与脚本编写：编写小代码、小脚本。 数据处理：转换数据并呈现，从图像和图形中提取数据。 语言相关：翻译、改换风格，总结视频内容，分新闻、观点、访谈、论文翻译来进行提炼。 工具使用：用通义听悟整理录音笔记，用 React 实现选中即解释，本机跑大语言模型工具，选词翻译、解读、拓展等。 社交与交流：与各种 AI 机器人聊天，比较多个大语言模型的回答。 AI 在各行业的应用场景广泛，包括： 医疗保健：医学影像分析辅助诊断疾病、加速药物研发、提供个性化医疗方案、机器人辅助手术等。 金融服务：风控和反欺诈、信用评估、投资分析、客户服务等。 零售和电子商务：产品推荐、搜索和个性化、动态定价、聊天机器人服务等。 制造业：预测性维护、质量控制、供应链管理、机器人自动化等。 对于个人而言，利用 AI 的选择包括： AI 转型：行业加 AI，如喜茶在新零售门店管理、营销销售、客户服务中应用 AI，金蝶拓展新的 AI 业务。 生活应用：在 WaytoAGI 学习 Agent 知识后搭建 bot 提高工作或学习效率，应用 AI 养成自驱自律习惯，用 AI 辅助教育培养下一代。
2025-02-21
适合做excel的AI工具
以下是一些适合用于 Excel 的 AI 工具： 1. Excel Labs：这是一个 Excel 插件，基于 OpenAI 技术新增了生成式 AI 功能，允许用户在 Excel 中直接利用 AI 进行数据分析和决策支持。 2. Microsoft 365 Copilot：微软推出的 AI 工具，整合了 Word、Excel、PowerPoint、Outlook、Teams 等办公软件，用户通过聊天形式告知需求，Copilot 会自动完成如数据分析或格式创建等任务。 3. Formula Bot：提供数据分析聊天机器人和公式生成器两大功能，用户可通过自然语言交互式地进行数据分析和生成 Excel 公式。 4. Numerous AI：支持 Excel 和 Google Sheets 的 AI 插件，除公式生成外，还能根据提示生成相关文本内容、执行情感分析、语言翻译等任务。 这些工具通过 AI 技术提升了 Excel 的数据处理能力，让用户能更高效地进行数据分析和决策。随着技术发展，未来可能会有更多 AI 功能集成到 Excel 中，进一步提高工作效率和数据处理的智能化水平。
2025-02-21
推荐些AI文章
以下是为您推荐的一些 AI 文章： 1. 《新手如何学习 AI？》 了解 AI 基本概念：建议阅读「」部分，熟悉术语和基础概念，包括主要分支及联系。 浏览入门文章，了解历史、应用和发展趋势。 开始 AI 学习之旅：在「」中找到为初学者设计的课程，特别推荐李宏毅老师的课程。还可通过在线教育平台按自己节奏学习并获取证书。 选择感兴趣的模块深入学习：AI 领域广泛，可根据兴趣选择特定模块，如图像、音乐、视频等，并掌握提示词技巧。 实践和尝试：理论学习后通过实践巩固知识，使用各种产品创作，知识库有实践作品和文章分享。 体验 AI 产品：与 ChatGPT、Kimi Chat、智谱、文心一言等互动，了解工作原理和交互方式。 2. 《01通往 AGI 之路知识库使用指南》 包括关于 AI 知识库使用及 AIPO 活动的介绍，AIPO 线下活动及 AI 相关探讨，way to AGI 社区活动与知识库介绍，AI 知识库及学习路径的介绍，时代杂志评选的领军人物，AI 相关名词解释，知识库的信息来源，社区共创项目，学习路径，经典必读文章，初学者入门推荐，历史脉络类资料等内容。 3. 《【AI 学习笔记】小白如何理解技术原理与建立框架（通俗易懂内容推荐）》 作者 Allen 旨在帮助入门同学建立框架，推荐了两个有重大帮助的视频： 由」，50 分钟速通 AI 大模型原理。 某知识 up 主老石谈芯专访安克创新 CEO 阳萌的视频「」，一共两期，内容都值得观看。
2025-02-21
AI生图哪个软件好用
目前市面上有不少好用的 AI 生图软件，以下为您列举一些常见的： 1. DALL·E2：由 OpenAI 开发，能够根据输入的文本描述生成逼真的图像。 2. StableDiffusion：具有强大的生成能力和丰富的自定义选项。 3. Midjourney：生成的图像富有创意和艺术感。 不同的软件在功能、生成效果和使用难度上可能有所差异，您可以根据自己的需求和偏好进行选择。
2025-02-21