企业官网建设流程全解析

网站策划方案实例,网站建设维护是什么岗位,微信小程序游戏破解盒子,wordpress 后台不显示文章全面介绍了大模型Agent的概念、核心模块及其应用。Agent作为感知环境、决策行动的系统#xff0c;包含LLM(大脑)、感知、记忆(短期/长期)、行动和规划(ReAct/Plan-and-Solve)五大模块。文章还探讨了Agent与Workflow的区别、评估方法和成本分析#xff0c;以及FM Agent与R…文章全面介绍了大模型Agent的概念、核心模块及其应用。Agent作为感知环境、决策行动的系统包含LLM(大脑)、感知、记忆(短期/长期)、行动和规划(ReAct/Plan-and-Solve)五大模块。文章还探讨了Agent与Workflow的区别、评估方法和成本分析以及FM Agent与RL Agent的不同为开发者构建智能系统提供了完整指导。1 什么是Agent智能体Agent是指能够感知环境、进行决策并采取行动以实现某种目标的系统。现在我们把Agent想象成一个人这样便于我们更好的理解比如说我们走在路上看到对面有辆车开过来了这个时候我们本能的会去躲避那整个过程是怎么发生的呢看到对面有车开过来这是通过眼睛看到信息通过神经传递给大脑大脑调动之前的记忆发现如果这个时候不躲开就有可能会被车撞然后驱动着脚走到旁边去。上面的过程就是感知路面环境、大脑决策最后采取行动的过程。基于上面的过程我们可以看出Agent会包含以下核心模块。2 Agent核心模块见下图不同的机构或团队对Agent的核心模块划分不同但都包含了感知、记忆、规划和行动四个模块。2.1 LLM大语言模型先简单说下大语言模型它是智能体的核心相当于人的大脑背后的神经网络设计也是基于人类大脑的神经系统尤其是神经元Neuron之间的连接与信号传递方式。关于大语言模型就不再详细说了大家基本每天都在用。然后还是想着重说下深度学习因为它与传统的软件研发流程不一样。就像AI大神卡帕西斯坦福读书时的导师是李飞飞, OpenAI的创始成员之一后面被马斯克亲自招募出任特斯拉的AI总监之后又回到OpenAI去年他正式宣布离开OpenAI最近的一个演讲中提到的一个概念叫“软件3.0”。软件1.0是我们最熟悉的传统软件研发流程指的是由人类程序员一行行编写代码的方式我们之前的研发流程都属于软件1.0。软件2.0是随着深度学习的兴起而出现的。它的核心已经不再是人工编写的代码而是通过训练来控制神经网络的权重。这个阶段很多事情不再依赖程序员去手动写逻辑而是依靠数据驱动模型进行“学习”而且泛化能力也很好。软件3.0就是我们现在通过cursor、trae、winself等AI 开发工具用自然语言进行编程它大大降低了软件创造的门槛。但仔细想想我们好像直接从1.0跳到了3.0并没有经过2.0但实际上软件2.0的应用其实还是蛮多的尤其是一些垂直行业如医疗健康让机器学习看片子帮助医生看病如农业领域能够预测作物产量和优化种植策略还有教育行业能够个性化学习路径和提高学习效率等等。所以我觉得大家有兴趣可以了解了解。推荐两本书《深度学习革命》、《深入浅出神经网络与深度学习》。2.2 Perception感知即智能体对环境的感知一个人可以通过眼睛、耳朵来感知环境机器人可以通过雷达和摄像头感知环境软件中主要是基于我们输入的上下文数据可以是文本、图片、视频、语音、文件等等。2.3 Memory记忆大模型其实是没有记忆的只能通过外部技术如RAG、ES模拟记忆效果以增强任务表现和交互连贯性。分为短期记忆Short-term和长期记忆Long-term。个人认为记忆对于大模型来说非常重要因为随着对模型的不断使用如果模型厂商如果把这些使用的记录全部变成记忆那模型就会越来越懂我们使用起来也会越来越顺手而不像现在每次在提示词上要还很多时间而且换个窗口后又得重来一次。2.3.1 短期记忆依赖模型上下文的token限制参考代码如下 在每次调用大模型的时候需要将工具返回的信息、人的反馈信息等都塞到messages中然后去调用大模型接口。ounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(line interface ChatMessage { role: user | assistant | system tool; content: string; tool_calls?: xxx; call_id?: string; } class Memory { private messages: ChatMessage[] []; constructor() { this.messages []; } addMessage(message: ChatMessage) { this.messages.push(message); } getMessages() { return this.messages; } }2.3.2长期记忆依赖于外部组件如RAG elasticsearch可以通过文件或数据库来做存储介质可以搜索、更新, 长期记忆又可以继续分如用户画像记忆情景记忆事实记忆等。接下来讲下在蛋糕烘培助手案例中是如何处理记忆的实时的对话信息作为工作记忆存在内存中到达一定阈值后由大模型来提取关键信息来作为短期记忆。然后上半年商机挖掘项目能够分析出客户画像将这部分信息作为长期记忆存储起来后续的对话每次调用大模型的时候会进行召回并更新短期记忆的召回次数。这些短期记忆会进行周期性的评估包括召回次数和重要性重要的会合并进核心记忆不重要的进行遗忘。整体会分三层工作记忆、短期记忆、 长期记忆每次询问通过向量检索更新短期记忆召回次数短期记忆由大模型来进行提取为边缘记忆并设置重要性评分2.4 Action行动行动很好理解LLM相当于我们的大脑但是光有大脑没有手脚也做不成事所以Agent就需要借助外部的工具进行行动。我们需要把我们的工具包括名称、描述和需要的参数告诉LLM当LLM来决定是否用工具以及什么时机用工具。介绍下案例中使用的商品查询工具即用户通过一个问题或图片就能找到商家后台商品库的商品商品的关键词查找处理将商家后台的商品图片和标题通过多模态模型提取出关键信息大模型会提取出关键信息然后让工具执行在执行过程中将关键词和商家后台商品的关键信息项进行相似度检索从而找出匹配的图片的查找处理将商家后台的商品图片向量化模型提取出用户想要的蛋糕商品图片链接然后和商家后台商品图片进行相似度匹配ounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(lineounter(line // 定义tools const tools [ { type: function, function: { name: query_goods, description: 查询蛋糕商品信息, parameters: { type: object, properties: { keywords: { type: array, items: { type: string, description: 蛋糕商品关键信息项, }, description: 蛋糕商品关键信息包含适用场合、目标人群、风格、口味、主题、颜色等, }, image_url: { type: string, description: 蛋糕商品图片链接, }, } }, } }, ... ];2.5 Planning规划规划这部分相对会复杂点接下来主要将常见的两种规划模式分别是ReAct和Plan-and-Resolve除了这两种模式还有多Agent模式等。2.5.1 ReActReason Action 推理 - 行动 - 反馈通过不断的推理、行动和反馈来最终完成用户的目标。蛋糕烘培助手的流程如下图2.5.2 Plan-and-Solve将任务分解成子目标并分布执行这个和ReAct的区别是Plan-and-Solve是先通过大模型将任务拆解然后再分布执行和ReAct是一步一步的去执行两种模式适用的场景不一样。比如说旅游规划的agent就可以用Plan-and-Solve模式先生成计划如要了解天气、要了解住宿等然后再解决计划 最终整合让大模型完成回答 当然中间也可以加反思对计划进行反思等。下面是基于Plan-and-Solve的流程图3 Agent评估报告评估报告是Agent开发过程中不可或缺的环节包括响应时间、完成度、工具使用情况、后续优化等它能够系统性地收集和分析Agent的运行数据,为后续的优化和迭代提供科学依据。所以在agent的设计环节都需要将这些数据都记录下来。4 Agent成本分析在做AI应用的过程中我们经常会被问到一个问题做个东西的成本怎么样AI相关应用与传统的应用之间的计费方式完全不一样了所以Agent中每次的模型调用所以针对Agent需要做成本分析。基于成本分析可以进行价值回顾和agent的优化。5 Agent vs Workflow用一句话来概括它们之间的区别就是Agent是你只需要告诉我你要什么不需要告诉我怎么做而workflow就是你要按照我编排好的路径来执行。一个是基于大模型来规划一个是基于人来规划。如何选择选Workflow数据处理管道文档审批流程任务流程相对固定步骤可预定义需要严格的执行顺序和质量控制要求高可靠性和可重复性涉及多个系统集成需要标准化流程合规要求严格需要审计追踪如数据处理管道、文档审批流程选Agent智能客服助手个人AI助理复杂问题诊断任务需要动态决策和灵活应对环境不确定性高需要自主判断要求个性化和上下文理解需要创造性解决问题用户交互频繁需要对话式体验如智能客服助手、个人AI助理、复杂问题诊断6 FM Agent 与 RL Agent以上讲的都是FM Agent是基于大型预训练模型Foundation Model 的智能体比如基于 GPT-4、Claude、Gemini 等大模型构建的智能体。核心能力是利用大语言模型LLM的理解、推理、规划和生成能力来感知世界、做决策、执行任务。除了FM Agent还有RL Agent它是基于强化学习Reinforcement Learning 原理构建的 Agent。它与环境交互根据奖励信号学习最优策略以最大化长期累计奖励。如DeepMind的AlphaGo Zero在围棋游戏中击败了世界顶级选手就是一个RL Agent。7 最后今天的分享只是掀开了 Agent 世界的一角。它的深度与潜力远不止于此新的思路、框架与落地案例正层出不穷。希望这份经验与尝试能为大家点亮一条更高效、更有趣的道路。回过头来看不论是 LLM、Workflow 还是 Agent终究只是工具。只有当它们与真实业务场景发生化学反应切实解决痛点创造价值时技术的光芒才会真正被点亮。愿我们带着好奇与敬畏把技术的锋利打磨成改变世界的钥匙。如何学习大模型 AI 由于新岗位的生产效率要优于被取代岗位的生产效率所以实际上整个社会的生产效率是提升的。但是具体到个人只能说是“最先掌握AI的人将会比较晚掌握AI的人有竞争优势”。这句话放在计算机、互联网、移动互联网的开局时期都是一样的道理。我在一线互联网企业工作十余年里指导过不少同行后辈。帮助很多人得到了学习和成长。我意识到有很多经验和知识值得分享给大家也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑所以在工作繁忙的情况下还是坚持各种整理和分享。但苦于知识传播途径有限很多互联网行业朋友无法获得正确的资料得到学习提升故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。这份完整版的大模型 AI 学习资料已经上传CSDN朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】为什么要学习大模型我国在A大模型领域面临人才短缺,数量与质量均落后于发达国家。2023年人才缺口已超百万凸显培养不足。随着AI技术飞速发展预计到2025年,这一缺口将急剧扩大至400万,严重制约我国AI产业的创新步伐。加强人才培养,优化教育体系,国际合作并进是破解困局、推动AI发展的关键。大模型入门到实战全套学习大礼包1、大模型系统化学习路线作为学习AI大模型技术的新手方向至关重要。 正确的学习路线可以为你节省时间少走弯路方向不对努力白费。这里我给大家准备了一份最科学最系统的学习成长路线图和学习规划带你从零基础入门到精通2、大模型学习书籍文档学习AI大模型离不开书籍文档我精选了一系列大模型技术的书籍和学习文档电子版它们由领域内的顶尖专家撰写内容全面、深入、详尽为你学习大模型提供坚实的理论基础。3、AI大模型最新行业报告2025最新行业报告针对不同行业的现状、趋势、问题、机会等进行系统地调研和评估以了解哪些行业更适合引入大模型的技术和应用以及在哪些方面可以发挥大模型的优势。4、大模型项目实战配套源码学以致用在项目实战中检验和巩固你所学到的知识同时为你找工作就业和职业发展打下坚实的基础。5、大模型大厂面试真题面试不仅是技术的较量更需要充分的准备。在你已经掌握了大模型技术之后就需要开始准备面试我精心整理了一份大模型面试题库涵盖当前面试中可能遇到的各种技术问题让你在面试中游刃有余。适用人群第一阶段10天初阶应用该阶段让大家对大模型 AI有一个最前沿的认识对大模型 AI 的理解超过 95% 的人可以在相关讨论时发表高级、不跟风、又接地气的见解别人只会和 AI 聊天而你能调教 AI并能用代码将大模型和业务衔接。大模型 AI 能干什么大模型是怎样获得「智能」的用好 AI 的核心心法大模型应用业务架构大模型应用技术架构代码示例向 GPT-3.5 灌入新知识提示工程的意义和核心思想Prompt 典型构成指令调优方法论思维链和思维树Prompt 攻击和防范…第二阶段30天高阶应用该阶段我们正式进入大模型 AI 进阶实战学习学会构造私有知识库扩展 AI 的能力。快速开发一个完整的基于 agent 对话机器人。掌握功能最强的大模型开发框架抓住最新的技术进展适合 Python 和 JavaScript 程序员。为什么要做 RAG搭建一个简单的 ChatPDF检索的基础概念什么是向量表示Embeddings向量数据库与向量检索基于向量检索的 RAG搭建 RAG 系统的扩展知识混合检索与 RAG-Fusion 简介向量模型本地部署…第三阶段30天模型训练恭喜你如果学到这里你基本可以找到一份大模型 AI相关的工作自己也能训练 GPT 了通过微调训练自己的垂直大模型能独立训练开源多模态大模型掌握更多技术方案。到此为止大概2个月的时间。你已经成为了一名“AI小子”。那么你还想往下探索吗为什么要做 RAG什么是模型什么是模型训练求解器 损失函数简介小实验2手写一个简单的神经网络并训练它什么是训练/预训练/微调/轻量化微调Transformer结构简介轻量化微调实验数据集的构建…第四阶段20天商业闭环对全球大模型从性能、吞吐量、成本等方面有一定的认知可以在云端和本地等多种环境下部署大模型找到适合自己的项目/创业方向做一名被 AI 武装的产品经理。硬件选型带你了解全球大模型使用国产大模型服务搭建 OpenAI 代理热身基于阿里云 PAI 部署 Stable Diffusion在本地计算机运行大模型大模型的私有化部署基于 vLLM 部署大模型案例如何优雅地在阿里云私有部署开源大模型部署一套开源 LLM 项目内容安全互联网信息服务算法备案…学习是一个过程只要学习就会有挑战。天道酬勤你越努力就会成为越优秀的自己。如果你能在15天内完成所有的任务那你堪称天才。然而如果你能完成 60-70% 的内容你就已经开始具备成为一名大模型 AI 的正确特征了。这份完整版的大模型 AI 学习资料已经上传CSDN朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】