典型智能体框架介绍及实战

原文地址:https://alphahinex.github.io/2024/08/18/popular-agent-frameworks/


description: "介绍了智能体及当前流行的智能体框架,并提供了几个实例"
date: 2024.08.18 10:34
categories:
- AI
tags: [AI Agent, AI]
keywords: Agent, Dify, Coze, LLM, workflow, RAG, FastGPT, DB-GPT, bisheng, ModelScope-Agent


对于智能体框架的理解

什么是智能体?

智能体,英文名称为 Agent,原意为代理人,当前语境下特指基于大语言模型的人工智能代理(LLM-powered agents、LLM based agents)。

关于智能体,目前还没有一个被广泛接受的定义。

“An autonomous agent is a system situated within and a part of an environment that senses that environment and acts on it, over time, in pursuit of its own agenda and so as to effect what it senses in the future.”

—— Franklin and Graesser (1997)

自主智能体是一个系统,它位于环境内部并是环境的一部分,能够感知该环境并在其中行动。随着时间的推移,它根据自身的议程采取行动,以影响它在未来感知到的环境。

A Survey on Large Language Model based Autonomous Agents

agent1

人民大学的论文《A Survey on Large Language Model based Autonomous Agents》将智能体架构分为五部分:

  1. 大语言模型(LLM)作为智能体的大脑;
  2. Profile 模块:用于智能体的自我认知和角色设定;
  3. Memory 模块:记忆模块,用来存储、获取、检索信息;
  4. Planning 模块:制定计划,可根据过去的行为与目标动态规划下一步的行动;
  5. Action 模块:执行模块,执行智能体的具体决策。

The Rise and Potential of Large Language Model Based Agents: A Survey

agent2

复旦大学的论文《The Rise and Potential of Large Language Model Based Agents: A Survey》认为智能体由三部分组成:

  1. Brain:大脑,负责自然语言理解及交互、知识存储及应用、长短期记忆及检索、推理及计划、迁移与泛化能力;
  2. Perception:感知,包括对文字、图像及音视频等输入的感知;
  3. Action:行动,包括自然语言对话、工具的运用、具身行为等。

Introduction to LLM Agents

agent3

Nvidia 技术博客《Introduction to LLM Agents》认为一个智能体有四个关键组件:

  1. Agent Core:包括智能体的整体目标、可用工具、如何使用不同计划模块的解释、相关的记忆、智能体角色;
  2. Memory module:记忆模块,包括短期记忆和长期记忆;
  3. Tools:一组可执行的工作流程、API 等供智能体使用的工具集;
  4. Planning module:计划模块,负责任务和问题分解、反思和改善。

简单概括

智能体 = LLM + 记忆 + 工具 + 流程

什么是智能体框架?

抽象构建智能体应用的通用过程,

封装不变步骤,

提供便捷定制及调整智能体各部分组件方式的智能体构建工具

并提供独立、内嵌、API 等形式的智能体能力发布访问形式。

为什么要用智能体框架?

快速构建智能体应用。

智能体框架的分类

按如下两个维度,对目前我们评估过的智能体框架进行分类:

  1. 开源(可私有化部署)/ 闭源(公网服务)
  2. 基于编码 / 基于流程图
agents
开源框架 GitHub Star 数量 贡献者数量
Dify 42k 377
FastGPT 16.3k 84
DB-GPT 13k 94
bisheng 8.5k 24
ModelScope-Agent 2.5k 40

统计日期:2024 年 08 月 17 日

基于流程图的智能体框架普遍使用流程

1. 构建知识库

准备用于扩展 LLM 的知识内容,导入到知识库中,实现检索增强生成(RAG);

2. 流程编排

通过预先编排好的流程,弥补开源大语言模型任务分解编排能力不足的缺陷;或设定领域业务流程;

3. 调试

即时查验智能体能力,并能够追溯回复内容的来源和耗时等;

4. 发布

将构建好的智能体应用,发布为独立应用、内嵌页面或 API 接口等形式。

实例

RAG —— 博客内容问答

在这些智能体框架/平台中,构建一个简单的 RAG 应用是非常方便的。将文档/知识导入到知识库,等待平台完成分段索引后,即可进行问答。

以 Dify 和 Coze 为例,将本博客的 markdown 文档 导入到知识库后,可以看到智能体回答的内容更加准确了。

Dify 内网应用对比效果

rag-dify

Coze 发布至公众号对比效果

rag-coze

Workflow —— 多轮对话补全参数

在与智能体的交互中,可能需要通过多轮对话的方式,由智能体引导用户以问答的形式提供必要的信息,进而完成后续的任务。

Dify 内网应用效果

在 Dify 最近发布的 0.7.0 版本中,增加了 会话变量 & 变量赋值节点,可以实现门诊导诊类流程:

流程的 DSL 可在这里下载:门诊导诊.yml

Coze 发布至公众号效果

在 Coze 中,通过工作流的 问答节点,可以设置需要询问的内容。多个问答节点可以实现多轮对话效果:

workflow-coze
workflow-wechat
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,088评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,715评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,361评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,099评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 60,987评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,063评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,486评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,175评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,440评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,518评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,305评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,190评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,550评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,880评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,152评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,451评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,637评论 2 335

推荐阅读更多精彩内容