网站建设策划书邢台网站建设

太原市科鑫网络科技有限公司 2026/09/09 19:32:32

MAF 中间件管道架构:企业级 Agent 的三层拦截体系

一句话简介

MAF 提供三层中间件架构,分别拦截 ChatClient 调用、Agent 运行和工具调用,实现日志、限流、权限等企业级横切关注点。


🎯 核心价值

  • 三层拦截:ChatClient 层、Agent Run 层、Function Invocation 层

  • 职责分离:每层处理不同粒度的横切关注点

  • 灵活组合:可独立或组合使用,按需配置


📝 三层中间件架构

各层职责对比

层级

拦截时机

典型用途

触发频率

Agent RunRunAsync()

调用

PII 过滤、Guardrails

每次 Agent 调用 1 次

ChatClient

LLM 调用

Token 统计、限流、缓存

每次 LLM 调用(可能多次)

Function

工具执行

日志、权限检查、Mock

每次工具调用


💻 实现方式

1. ChatClient 中间件

使用 MEAI 的DelegatingChatClientUse()方法:

var chatClient = AIClientHelper.GetDefaultChatClient() .AsBuilder() .Use(getResponseFunc: async (messages, options, innerClient, ct) => { Console.WriteLine($"📊 [ChatClient] 请求消息数: {messages.Count()}"); var response = await innerClient.GetResponseAsync(messages, options, ct); Console.WriteLine($"📊 [ChatClient] Token: {response.Usage?.TotalTokenCount}"); return response; }) .Build();

核心要点:

  • 🔧 拦截每次 LLM 调用

  • 🔧 可访问完整的请求和响应

  • 🔧 适用于监控、限流、缓存等场景


2. Agent Run 中间件

使用AgentBuilder.Use()添加:

var agent = chatClient.CreateAIAgent(instructions: "你是智能助手") .AsBuilder() .Use(async (messages, thread, options, innerAgent, ct) => { Console.WriteLine($"🛡️ [Agent Run] Pre-Run 检查"); var response = await innerAgent.RunAsync(messages, thread, options, ct); Console.WriteLine($"🛡️ [Agent Run] Post-Run 完成"); return response; }, null) .Build();

核心要点:

  • 🛡️ 包裹整个 Agent 执行流程

  • 🛡️ 适用于安全检查、审计日志

  • 🛡️ 每次RunAsync()只触发一次


3. Function Invocation 中间件

拦截工具函数的执行:

var agent = chatClient.CreateAIAgent(...) .AsBuilder() .Use(async (agent, context, next, ct) => { Console.WriteLine($"🔧 [Function] 调用: {context.Function.Name}"); var result = await next(context, ct); Console.WriteLine($"🔧 [Function] 结果: {result}"); return result; }) .Build();

核心要点:

  • 🔧 拦截每个工具函数调用

  • 🔧 可修改参数或覆盖结果

  • 🔧 适用于权限检查、Mock 数据


🏢 企业级最佳实践

推荐的中间件组合

// 1️⃣ ChatClient 层:监控和性能 var chatClient = baseChatClient.AsBuilder() .Use(new TokenMonitoringMiddleware()) .Use(new RateLimitingMiddleware()) .Build(); // 2️⃣ Agent 层:安全和审计 var agent = chatClient.CreateAIAgent(...) .AsBuilder() .Use(PIIFilterMiddleware, null) // PII 过滤 .Use(GuardrailsMiddleware, null) // 内容安全 .Use(FunctionLoggingMiddleware) // 工具日志 .Build();

各层职责建议

层级

推荐用途

ChatClient

Token 统计、限流、缓存、重试

Agent Run

PII 过滤、Guardrails、全局审计

Function

权限检查、调用日志、Mock 数据


🎯 总结

  • 三层架构:ChatClient、Agent Run、Function Invocation 各司其职

  • 洋葱模型:请求从外向内,响应从内向外

  • 灵活组合:根据需求选择合适的中间件层级

  • 企业级应用:安全检查最外层,性能优化靠内层


如需获取文章配套完整代码,可扫码咨询领取。👇

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈,一经查实,立即删除!

如何建设网站长沙网站建设

YOLOv8输入校验:防御恶意图像上传攻击在智能安防、工业质检和自动驾驶等场景中,目标检测模型正越来越多地通过Web接口暴露给外部用户。一个看似简单的“上传图片进行识别”功

2026/06/30 12:09:29

南充网站建设合川网站建设

索引算法有哪些?索引算法有 B+Tree算法和Hash算法B+Tree算法B+Tree是最常用的mysql数据库索引算法,也是mysql默认的算法。

2026/06/30 13:18:35

东营网站建设茂名网站建设

第一章:Open-AutoGLM常见问题概述在部署和使用 Open-AutoGLM 过程中,开发者常遇到若干典型问题,涵盖模型加载、推理性能、依赖冲突及 AP

2026/06/30 13:48:37

贵阳网站建设网站设计建设

在Windows上搭建企业级CentOS开发环境的完整指南【免费下载链接】CentOS-WSL项目地址: https://gitcode.com/gh_mirrors/ce/CentOS-WSL想要在

2026/06/30 11:39:27

网站建设项目北京高端网站建设

前言:代码写到深夜,谁来陪你?作为一个程序员,我不知道你们有没有这种时刻:凌晨两点,盯着屏幕上那段死活跑不通的递归逻

2026/06/30 12:39:32

苏州网站建设荆门网站建设

使用 UltraISO 刻录 IndexTTS2 镜像实现 AI 模型物理备份在人工智能模型日益庞大和复杂的今天,如何安全、长久地保存训练成果与完整运行环境,已成为开发者面

2026/06/30 12:42:02

长沙市网站建设公司宜兴网站建设

本文详细解释了Transformer架构如何解决RNN和LSTM中的长距离依赖问题。RNN/LSTM由于循环结构,在处理长序列时会出现梯度消失或爆炸,导致早期信息难以传递到

2026/06/30 11:31:55

医院网站建设长沙网站建设公司

Wan2.2-T2V-5B能否生成电子票券动画?线上线下联动你有没有遇到过这样的场景——用户刚买完演唱会门票,收到的却是一张冷冰冰的二维码截图?὏

2026/06/30 13:21:35