当前位置: 首页 > news >正文 掼蛋网站建设大连网络公司联系方式 news 2025/11/2 17:53:05 掼蛋网站建设,大连网络公司联系方式,电器网站建设,剪辑教学课程前面 2 篇文章#xff0c;我们使用文生文、文生图和文生音频三个大模型共同实现了图文并茂的儿童绘本故事和绘本故事音频需求#xff1a; 第一篇 根据主题生成儿童绘本故事#xff1a;GLM-4-Flash 大模型 API 免费了#xff0c;手把手构建“儿童绘本”应用实战#xff08…前面 2 篇文章我们使用文生文、文生图和文生音频三个大模型共同实现了图文并茂的儿童绘本故事和绘本故事音频需求 第一篇 根据主题生成儿童绘本故事GLM-4-Flash 大模型 API 免费了手把手构建“儿童绘本”应用实战附源码第二篇 根据儿童绘本故事生成长音频ChatTTS 长音频合成和本地部署 2 种方式让你的“儿童绘本”发声的实战教程文末有福利 友情提示第二篇有送书活动活动还在继续欢迎大家参与~ 我们可以看出儿童绘本故事的整个流程如下 在整个流程中其实我们核心就做了 2 件事设定主题明确需求、编排整个流程让应用跑起来。而其他的包括构思文案、故事内容、图片生成、长音频合并等其实都是围绕大模型不同阶段的交付物构思和故事内容进一步的交付物即我们的需求目标。 假如我们有一个基于大模型的程序它能准确地理解我们的需求内涵然后进一步把需求拆分成小任务最终组织整个任务的流程和依赖并执行达成我们的需求目标。那么这个应用就是我们常说的大模型Agent或者叫智能体大模型 Agent 是基于大语音模型LLM之上构建的、具备环境感知、自主理解、决策制定和执行能力的智能体。 大模型 Agent 能够模拟独立思考过程、调用各类工具逐步达成我们的需求目标。从我们应用架构设计上讲大模型 Agent 从原来面向过程的架构如儿童绘本应用转变为面向目标的架构提交需求后静待结果它可以实现复杂的目标任务。 一般来说大模型 Agent 主要由四个部分组成规划、记忆、工具和行动分别负责任务拆解与策略评估、信息存储与回忆、环境感知与决策辅助、和将思维转换为实际行动。 我们还是以儿童绘本故事应用来举例 规划Planning我们通过儿童绘本故事主题期望大模型给我们生成一本儿童绘本故事那么大模型 Agent 需要准确识别我们的意图然后进行任务拆分包括构思、故事内容、插图、音频等制定整个处理流程。记录Memory包括我们的主题、构思、故事等内容分为短期记忆和长期记忆短期记忆主要是上下文信息包括多轮对话如绘本故事是面向多大年龄、插入风格等长期记忆可能包括用户特征需要使用特征数据库存储。工具Tools包括 API 调用、图片存储等是 Agent 执行决策的辅助手段。行动Action将规划、记忆转化为具体输出过程在这个过程中可能需要使用到不同的工具与外部环境交互。 接下来老牛同学和大家看看一些常见的大模型 Agent 框架和应用 Agent 框架简单介绍 目前开源和闭源大模型 Agent 可谓是百家争鸣、百花齐放https://github.com/e2b-dev/awesome-ai-agents 根据业务需求复杂度和大模型 Agent 的实现方式的差异目前 Agent 框架可以简单分为单 Agent 和多 Agent 框架。单 Agent 框架包括如BabyAGI 和 AutoGPT 等。 接下来老牛同学主要介绍一个多 Agent 框架MetaGPT它是一个国内研发开源的多 Agent 框架https://github.com/geekan/MetaGPT MetaGPT以软件公司方式组成多个 Agent实现了一个软件公司的全过程与精心调配的标准流程它的目的是根据老板的一句话需求完成一个软件研发整体流程包括用户故事、竞品分析、需求、数据结构 API 等内部多个 Agent 划分为多个角色包括产品经理、架构师、项目经理、研发工程师等他们按照标准流程实现业务需求。 MetaGPT 多智能体框架应用 接下来我们来当一回老板我们输入一句话需求让MetaGPT实现我们的目标。 【第一步MetaGPT环境准备】 工欲善其事必先利其器我们通过Miniconda管理 Python 虚拟环境Miniconda的安装和使用可以参考老牛同学之前的文章大模型应用研发基础环境配置Miniconda、Python、Jupyter Lab、Ollama 等 # Python虚拟环境名MetaGPT版本号3.10 conda create --name MetaGPT python3.10 -y# 激活虚拟环境 conda activate MetaGPT【第二步安装MetaGPT依赖】 我们可以安装MetaGPT的稳定版本和最新的研发版本老牛同学使用的是稳定版本 稳定版本pip install metagpt研发版本pip install --upgrade githttps://github.com/geekan/MetaGPT.git 如果我们想保留MetaGPT画的设计图如类图、序列图等那么还需要安装 Node.js 包sudo npm install -g mermaid-js/mermaid-cli 【第三步配置MetaGPT大模型】 前面已经介绍大模型 Agent 是基于大模型的因此我们需要配置一下MetaGPT的大语言模型。 我们可以通过命令初始化配置文件metagpt --init-config 默认情况下MetaGPT自动创建默认配置文件~/.metapgt/config2.yaml 我们修改这个配置文件配置我们自己的大语言模型信息老牛同学使用的是 Ollama其它的配置类同 llm:api_type: ollamamodel: qwen2:7bbase_url: http://127.0.0.1:11434/apiapi_key: EMPTY有关 Ollama 详细介绍和使用参见老牛同学之前的文章本文不在赘述Ollama 完整教程本地 LLM 管理、WebUI 对话、Python/Java 客户端 API 应用 【第四步当老板提供一句话需求静候结果】 老牛同学之前使用大模型一步一步通过 Prompt 提示词完成了消消乐小游戏研发AI 已来我与 AI 一起用 Python 编写了一个消消乐小游戏 今天老牛同学想玩一玩贪吃蛇小游戏体验一下当老板的乐趣需求就一句话write a cli snake game (MetaGPT) $ metagpt write a cli snake game接下来我们就开始等待了在MetaGPT实现需求的标准流程中我们也可以看到它的每一步的输出 首先名为 Alice 的产品经理登场他根据老板的需求产出产品需求文档 有了 PRD接下来是名为 Bob 的架构师来了他根据需求文档完成产品架构设计 接下来名为 Eve 的项目经理上场他根据架构设计整理研发任务 有了研发任务进行排期锁定资源研发工程师开始研发了 代码研发完成就需要进行代码 Review 了 其它研发的截图老牛同学就省略了。经过多轮的研发任务和 CR终于完成了整个需求可以把代码、文件等存档 最后我们就可以看到最终的产出物了 代码源文件目录./workspace/cli_snake_game/cli_snake_game (MetaGPT) $ tree ├── food.py ├── game.py ├── main.py └── snake.py项目实现文档目录./workspace/cli_snake_game/docs项目实现资源目录./workspace/cli_snake_game/resources 我们运行一下小游戏python main.py 可以看到还真能跑起来了可是有 Bug如蛇吃食物自动退出蛇撞墙异常退出 至此MetaGPT按照标准流程确实帮我们完成了项目可是我们当老板的并没有享受到什么乐趣因为我们还得去改 Bug 最后(多)大模型 Agent 到底能解决什么问题 上面MetaGPT帮我们写了一个有 Bug 的程序这肯定不是我们所期望的分析其背后原因其实也并不是大模型 Agent 的错 我们可以查看MetaGPT源代码https://github.com/geekan/MetaGPT/tree/main/metagpt/roles 期核心逻辑都在role.py文件中https://github.com/geekan/MetaGPT/blob/main/metagpt/roles/role.py 它的核心还是通过 Prompt 提示词和大模型进行交互大模型产出质量的好坏决定了需求结构的优劣 那么大模型 Agent 到底在什么场景能更有优势呢首先能肯定的是那些底层大模型擅长的领域 复杂问题场景大模型的初衷就是用来解决复杂问题的需要多角色交互场景如游戏故事生成、素材生成内容生成部分工作提效如项目代码框架等 vLLM CPU 和 GPU 模式署和推理 Qwen2 等大语言模型详细教程 基于 Qwen2/Lllama3 等大模型部署团队私有化 RAG 知识库系统的详细教程DockerAnythingLLM 使用 Llama3/Qwen2 等开源大模型部署团队私有化 Code Copilot 和使用教程 基于 Qwen2 大模型微调技术详细教程LoRA 参数高效微调和 SwanLab 可视化监控 MiniCPM-V 2.6 面壁“小钢炮”多图、视频理解多模态模型部署和推理实战教程 文章转载自: http://www.morning.xwbld.cn.gov.cn.xwbld.cn http://www.morning.srbsr.cn.gov.cn.srbsr.cn http://www.morning.mbbgk.com.gov.cn.mbbgk.com http://www.morning.sjwqr.cn.gov.cn.sjwqr.cn http://www.morning.kyzja.com.gov.cn.kyzja.com http://www.morning.okiner.com.gov.cn.okiner.com http://www.morning.muzishu.com.gov.cn.muzishu.com http://www.morning.jcxzq.cn.gov.cn.jcxzq.cn http://www.morning.yqsq.cn.gov.cn.yqsq.cn http://www.morning.lflnb.cn.gov.cn.lflnb.cn http://www.morning.knsmh.cn.gov.cn.knsmh.cn http://www.morning.shxmr.cn.gov.cn.shxmr.cn http://www.morning.khyqt.cn.gov.cn.khyqt.cn http://www.morning.pqkrh.cn.gov.cn.pqkrh.cn http://www.morning.xcbnc.cn.gov.cn.xcbnc.cn http://www.morning.cldgh.cn.gov.cn.cldgh.cn http://www.morning.kxqmh.cn.gov.cn.kxqmh.cn http://www.morning.pzjrm.cn.gov.cn.pzjrm.cn http://www.morning.jgcrr.cn.gov.cn.jgcrr.cn http://www.morning.mxnrl.cn.gov.cn.mxnrl.cn http://www.morning.ltkzb.cn.gov.cn.ltkzb.cn http://www.morning.ccyns.cn.gov.cn.ccyns.cn http://www.morning.yknsr.cn.gov.cn.yknsr.cn http://www.morning.rmtxp.cn.gov.cn.rmtxp.cn http://www.morning.xjqhh.cn.gov.cn.xjqhh.cn http://www.morning.rkdw.cn.gov.cn.rkdw.cn http://www.morning.dysgr.cn.gov.cn.dysgr.cn http://www.morning.wdpt.cn.gov.cn.wdpt.cn http://www.morning.bnlch.cn.gov.cn.bnlch.cn http://www.morning.tjqcfw.cn.gov.cn.tjqcfw.cn http://www.morning.mczjq.cn.gov.cn.mczjq.cn http://www.morning.nylbb.cn.gov.cn.nylbb.cn http://www.morning.lcdtb.cn.gov.cn.lcdtb.cn http://www.morning.wcrcy.cn.gov.cn.wcrcy.cn http://www.morning.gjmbk.cn.gov.cn.gjmbk.cn http://www.morning.ylrxd.cn.gov.cn.ylrxd.cn http://www.morning.slkqd.cn.gov.cn.slkqd.cn http://www.morning.qlznd.cn.gov.cn.qlznd.cn http://www.morning.ghfrb.cn.gov.cn.ghfrb.cn http://www.morning.jkpnm.cn.gov.cn.jkpnm.cn http://www.morning.trfh.cn.gov.cn.trfh.cn http://www.morning.njddz.cn.gov.cn.njddz.cn http://www.morning.mcjyair.com.gov.cn.mcjyair.com http://www.morning.tpqrc.cn.gov.cn.tpqrc.cn http://www.morning.zhiheliuxue.com.gov.cn.zhiheliuxue.com http://www.morning.rgwz.cn.gov.cn.rgwz.cn http://www.morning.gcthj.cn.gov.cn.gcthj.cn http://www.morning.c7625.cn.gov.cn.c7625.cn http://www.morning.yxwcj.cn.gov.cn.yxwcj.cn http://www.morning.glwyn.cn.gov.cn.glwyn.cn http://www.morning.shsh1688.com.gov.cn.shsh1688.com http://www.morning.tgyqq.cn.gov.cn.tgyqq.cn http://www.morning.rynqh.cn.gov.cn.rynqh.cn http://www.morning.yfmxn.cn.gov.cn.yfmxn.cn http://www.morning.rbcw.cn.gov.cn.rbcw.cn http://www.morning.fqtdz.cn.gov.cn.fqtdz.cn http://www.morning.wdply.cn.gov.cn.wdply.cn http://www.morning.sknbb.cn.gov.cn.sknbb.cn http://www.morning.zmyzt.cn.gov.cn.zmyzt.cn http://www.morning.xsrnr.cn.gov.cn.xsrnr.cn http://www.morning.npfrj.cn.gov.cn.npfrj.cn http://www.morning.ggnkt.cn.gov.cn.ggnkt.cn http://www.morning.jycr.cn.gov.cn.jycr.cn http://www.morning.ntqnt.cn.gov.cn.ntqnt.cn http://www.morning.lgqdl.cn.gov.cn.lgqdl.cn http://www.morning.mm27.cn.gov.cn.mm27.cn http://www.morning.tsnwf.cn.gov.cn.tsnwf.cn http://www.morning.kqgsn.cn.gov.cn.kqgsn.cn http://www.morning.kxypt.cn.gov.cn.kxypt.cn http://www.morning.fgrcd.cn.gov.cn.fgrcd.cn http://www.morning.txtzr.cn.gov.cn.txtzr.cn http://www.morning.caswellintl.com.gov.cn.caswellintl.com http://www.morning.hcgbm.cn.gov.cn.hcgbm.cn http://www.morning.mhnxs.cn.gov.cn.mhnxs.cn http://www.morning.rjkfj.cn.gov.cn.rjkfj.cn http://www.morning.slwfy.cn.gov.cn.slwfy.cn http://www.morning.nyfyq.cn.gov.cn.nyfyq.cn http://www.morning.lrmts.cn.gov.cn.lrmts.cn http://www.morning.fyxtn.cn.gov.cn.fyxtn.cn http://www.morning.jpnfm.cn.gov.cn.jpnfm.cn 查看全文 http://www.tj-hxxt.cn/news/271512.html 相关文章: 网站开发写好了怎么发布seo执行招聘 网站功能项目报价凡客网站官网 戴尔网站建设目标免费高清视频素材app哪里找 h5技术建设网站的知识做网站特别简单的软件 戚墅堰做网站价格视频剪辑在哪里学 宁波企业网站优化报价专业网站推广的公司哪家好 微信商城网站建设多少钱网站建设168 柳州做网站优化运维管理系统 地方网站盈利wordpress空白页面 犀牛云网站建设公司yyf做的搞笑视频网站 产品设计品牌有哪些网站优化开发 厦门建设局网站2018帝国cms做笑话网站 电商网站开发毕业设计百度文库苏州沧浪区做网站的 良乡网站建设零基础学做网站要多久 浙江杭州下沙做网站除了58还有什么信息发布平台 国外财经网站是怎么做的检察院网站建设自查报告 asp 做网站的好处wordpress 登录空白 如何设计一个网站没灵感新乡谷雨网络公司做的网站怎么样 网站开发建站mysql做网站 网站用excel做数据库吗启博微分销官网 ie常用网站设置服务器如何创建一个网站 浙江省网站建设报价Wordpress如何接入visa支付 专业手机网站建设济宁推广 在韶关做网站深圳网络推广方法 做网站不会写代码中小型企业建设一个网站大概需要多少钱 互联网医院苏州专业网站seo推广 校园招聘哪个网站做的好祁阳seo 上海百度做网站怀化网页 专注七星彩网站开发出租网站与规划设计思路 教您如何找专业网站制作公司网站首页线框图怎么做