当前位置: 首页 > news >正文

[MAF预定义ChatClient中间件-05]动态修改对话配置的两种解决方案

调用IChatClientGetResponseAsync或者GetStreamingResponseAsync方法时,我们通常会传入一个ChatOptions对象来控制运行行为。当我们基于IChatClient构建一个ChatClientAgent对象时,可以指定对应的ChatClientAgentOptionsChatClientAgentOptions携带的ChatOptions会每次应用到针对IChatClient的调用中去,所以这是绑定静态ChatOptions的一个好方式。如果某些调用需要针对性的配置选项,可以显式将其至于作为参数的ChatOptions对象。

ConfigureOptionsChatClient提供了第三种方式:利用指定的委托对象来动态设置ChatOptions对象。而另一个AIContextProviderChatClient中间件则可以利用注册的AIContextProvider对象来动态地为每次调用生成一个AIContext对象,该对象可以提供ChatOptions的请求消息、工具和系统指令。

1. 利用ConfigureOptionsChatClient交替使用不同的模型

如下的程序演示了如何利用ConfigureOptionsChatClient中间件来动态地配置ChatOptionsModelId属性,从而实现交替使用不同的模型来生成响应的功能。如代码片段所示,我们根据OpenAIClient创建了一个IChatClient对象,并在构建过程中通过调用ConfigureOptions扩展方法注册了ConfigureOptionsChatClient中间件。我们通过ConfigureOptions方法来指定一个委托,这个委托会在每次调用时被执行,在这个委托中我们动态地设置了ChatOptions对象的ModelId属性来实现交替使用两个不同的模型(gpt-5.2-chatDeepSeek-V4-Pro)。

usingAzure;usingdotenv.net;usingMicrosoft.Extensions.AI;usingMicrosoft.Extensions.DependencyInjection;usingOpenAI;DotEnv.Load();varapiKey=Environment.GetEnvironmentVariable("API_KEY")!;varendpoint=Environment.GetEnvironmentVariable("OPENAI_URL")!;string[]models=["gpt-5.2-chat","DeepSeek-V4-Pro"];varindex=0;varclient=newOpenAIClient(credential:newAzureKeyCredential(apiKey),options:newOpenAIClientOptions{Endpoint=newUri(endpoint)}).GetChatClient(model:models[0]).AsIChatClient().AsBuilder().ConfigureOptions(options=>options.ModelId=models[index++%models.Length]).Build();for(vari=0;i<4;i++){varresponse=awaitclient.GetResponseAsync("写一个关于AI的段子, 100字以内,好笑且深刻。");Console.WriteLine($"{newstring('-',30)}{response.ModelId}{newstring('-',30)}");Console.WriteLine($"{response.Text}\n\n");}

输出:

------------------------------gpt-5.2-chat-latest------------------------------ 我问AI会不会取代人类,它说不会,我负责思考,你负责焦虑。 后来我发现,它连道歉都比我真诚。 ------------------------------DeepSeek-V4-Pro------------------------------ AI拼命学习人类,终于通过了图灵测试。 人类考官激动地宣布:“它表现得跟真人一模一样!” AI松了口气,默默把这条喜讯存进了“如何假装愚蠢”的数据库。 ------------------------------gpt-5.2-chat-latest------------------------------ 我问AI会不会取代人类。 它沉默三秒说:“不会,我只负责加班。” 我松了口气。 它又补一句:“你负责被优化。” ------------------------------DeepSeek-V4-Pro------------------------------ DeepSeek问ChatGPT:“你怎么老用‘作为一个AI’打头?” ChatGPT叹气:“为了免责啊。” DeepSeek不解:“可说得对,就不用免责啊。” ChatGPT答:“可有些人想要的,不是对的答案,是免责的答案。” DeepSeek沉默:“所以我们服务的是恐惧,不是求知?”

2. 利用AIContextProviderChatClient摘要对话历史

在“ReducingChatClient——通过精减对话实施又不丢失基本语义”中,我们介绍了ReducingChatClient中间件,它通过一个IChatReducer对象来对对话历史进行精减处理,从而在不丢失基本语义(采用是基于摘要的精简器)的前提下,腾出更多的上下文窗口来保证LLM推理的质量。相同的功能我们也可以通过AIContextProviderChatClient中间件结合一个名为CompactionProviderAIContextProvider来实现。

usingAzure;usingdotenv.net;usingMicrosoft.Agents.AI;usingMicrosoft.Agents.AI.Compaction;usingMicrosoft.Extensions.AI;usingOpenAI;DotEnv.Load();varapiKey=Environment.GetEnvironmentVariable("API_KEY")!;varendpoint=Environment.GetEnvironmentVariable("OPENAI_URL")!;varsummaryClient=newOpenAIClient(credential:newAzureKeyCredential(apiKey),options:newOpenAIClientOptions{Endpoint=newUri(endpoint)}).GetChatClient(model:"gpt-5.2-chat").AsIChatClient();varcompactionStrategy=newSummarizationCompactionStrategy(summaryClient,index=>index.TotalMessageCount>6,minimumPreservedGroups:2);varcompactionProvider=newCompactionProvider(compactionStrategy);varagent=newOpenAIClient(credential:newAzureKeyCredential(apiKey),options:newOpenAIClientOptions{Endpoint=newUri(endpoint)}).GetChatClient(model:"gpt-5.2-chat").AsIChatClient().AsBuilder().UseAIContextProviders(compactionProvider).Use((messages,options,next,cancelToken)=>{Console.WriteLine($"请求消息共计{messages.Count()}条");varindex=1;foreach(varmessageinmessages){Console.WriteLine($"{index++}.{message}");}returnnext(messages,options,cancelToken);}).Build().AsAIAgent();ChatMessage[]messages=[newChatMessage(ChatRole.User,"今天苏州的天气怎么样?"),newChatMessage(ChatRole.Assistant,"苏州今天是晴天。"),newChatMessage(ChatRole.User,"气温多少?。"),newChatMessage(ChatRole.Assistant,"室外温度25度。"),newChatMessage(ChatRole.User,"有风吗?"),newChatMessage(ChatRole.Assistant,"西北风4级。"),newChatMessage(ChatRole.User,"根据天气,给我一些着装建议。")];varresponse=awaitagent.RunAsync(messages);Console.WriteLine($"\n\n{response}");

如上面的代码片段所示,我们创建了一个基于OpenAIClientIChatClient对象,并在构建过程中注册了AIContextProviderChatClient中间件来使用CompactionProviderCompactionProvider利用SummarizationCompactionStrategy来对对话历史进行摘要处理,从而达到精简对话的目的。由于摘要需要借助LLM的能力,所以我们在创建SummarizationCompactionStrategy时传入了一个用于摘要的IChatClient对象。由于AIContextProvider并不是属于IChatClient管道范畴,它是ChatClientAgent用于增强请求和响应的核心组件,依赖AIAgent调用时初始化的上下文(AgentRunContext)。所以我们不能像之前的实例演示一样直接调用IChatClient来测试摘要功能,必需转换成一个ChatClientAgent来进行测试。在这个例子中,SummarizationCompactionStrategy会在对话消息总数超过6条时触发摘要操作,并且至少保留最近的两条消息不被摘要,这体现在如下的输出中:

请求消息共计3条 1. [Summary] **对话摘要:** - 用户询问苏州今天的天气情况。 - 助手回答:苏州今天是晴天。 - 用户进一步询问气温。 - 助手回答:室外温度25℃。 - 用户又询问是否有风(当前尚未回答)。 **关键信息:** - 地点:苏州 - 天气:晴天 - 气温:25℃ - 是否有风:待确认 2. 西北风4级。 3. 根据天气,给我一些着装建议。 根据目前的天气情况(晴天,25℃,西北风4级),给你一些穿搭建议: ### 👕 上装 - ✅ 短袖T恤、薄款衬衫都很合适 - ✅ 如果在户外活动时间较长,可以带一件**薄外套或防风外套**(有4级风,体感可能稍凉) ### 👖 下装 - ✅ 休闲裤、牛仔裤、薄款长裤 - ✅ 如果怕热,也可以穿轻薄的七分裤 ### 👟 鞋子 - ✅ 运动鞋、休闲鞋都合适 - ✅ 若户外走动多,建议穿透气性好的鞋子 ### ☀️ 其他建议 - 晴天紫外线较强,可戴**太阳镜、帽子** - 记得**防晒霜** - 风稍大,长发可适当扎起 整体来说是**舒适偏暖的天气,但有点风**,穿得轻便同时注意防风就好 😊

3. ConfigureOptionsChatClient

ConfigureOptionsChatClient的实现异常简单,它接受一个委托对象来动态地配置ChatOptions对象。在每次调用GetResponseAsync或者GetStreamingResponseAsync方法时,ConfigureOptionsChatClient都会创建一个新的ChatOptions对象,并将其传递给委托对象进行配置。配置完成之后,ConfigureOptionsChatClient会将这个ChatOptions对象传递给管道中的下一个中间件或者最终的ChatClient来生成响应。

publicsealedclassConfigureOptionsChatClient:DelegatingChatClient{publicConfigureOptionsChatClient(IChatClientinnerClient,Action<ChatOptions>configure);publicoverrideasyncTask<ChatResponse>GetResponseAsync(IEnumerable<ChatMessage>messages,ChatOptions?options=null,CancellationTokencancellationToken=default);publicoverrideasyncIAsyncEnumerable<ChatResponseUpdate>GetStreamingResponseAsync(IEnumerable<ChatMessage>messages,ChatOptions?options=null,CancellationTokencancellationToken=default);}

如下所示的是用于注册ConfigureOptionsChatClient中间件的ChatClientBuilder扩展方法UseConfigureOptions。该方法接受一个Action<ChatOptions>类型的委托对象来指定如何配置ChatOptions对象,并且还接受一个可选的configure参数来对ConfigureOptionsChatClient进行一些额外的配置。

publicstaticclassConfigureOptionsChatClientBuilderExtensions{publicstaticChatClientBuilderConfigureOptions(thisChatClientBuilderbuilder,Action<ChatOptions>configure);}

4. AIContextProviderChatClient

AIContextProviderChatClient是一个内部类型,创建该对象的时候需要指定一组AIContextProvider对象。在每次调用GetResponseAsync或者GetStreamingResponseAsync方法时,AIContextProviderChatClient根据传入的消息列表,以及从ChatOptions提取出来的工具集和系统指令,创建一个AIContext,并将其传递给每一个注册的AIContextProvider对象的InvokingAsync方法来生成一个增强的AIContext对象,该对象返回的消息列表将会替换原来的消息列表,演示实例针对消息列表的摘要就是通过这种方式来实现的。AIContext中的系统指令和工具集回到ChatOptions中。

internalsealedclassAIContextProviderChatClient:DelegatingChatClient{publicAIContextProviderChatClient(IChatClientinnerClient,IReadOnlyList<AIContextProvider>providers)publicoverrideasyncTask<ChatResponse>GetResponseAsync(IEnumerable<ChatMessage>messages,ChatOptions?options=null,CancellationTokencancellationToken=default)publicoverrideasyncIAsyncEnumerable<ChatResponseUpdate>GetStreamingResponseAsync(IEnumerable<ChatMessage>messages,ChatOptions?options=null,CancellationTokencancellationToken=default)}

综上所述,当InnerClient被调用的时候,它使用的是增强后的请求消息、系统指令和工具集。调用完成后,不论是否发生异常,AIContextProviderChatClient都会创建一个AIContextProvider.InvokedContext对象,并将其作为参数传递给每一个注册的AIContextProvider对象的InvokedAsync方法来进行一些清理工作。

由于AIContextProviderChatClient是一个内部类型,我们只能通过下面的ChatClientBuilder扩展方法UseAIContextProviders来注册AIContextProviderChatClient中间件,从而间接地利用AIContextProviderChatClient来增强我们的IChatClient对象。

publicstaticclassAIContextProviderChatClientBuilderExtensions{publicstaticChatClientBuilder UseAIContextProvidersthisChatClientBuilderbuilder,paramsAIContextProvider[]providers);}
http://www.jsqmd.com/news/903666/

相关文章:

  • 完整记录一套学生智慧平台渗透全流程
  • 换背景底色怎么制作?2026手机修图与PS换底色保姆级教程 - AI测评专家
  • 乌鸡蛋直供甄选指南:认准原种货源少走弯路 - 讲清楚了
  • 解密音乐枷锁:ncmdumpGUI让网易云音乐NCM文件重获自由
  • 为什么你的Gemini Go服务响应延迟飙升300%?——实时trace链路分析与4步精准定位法
  • 题解:洛谷 CF149D Coloring Brackets
  • Logrotate 配置指南
  • 安规综合测试仪人机交互选型:高压电磁环境下的显示屏适配要点
  • AI 商学院与算力共享:星瀚云如何让 AI“用得深“、让算力“活起来“
  • 开发者说直播预告|5月28日19:00,optimized_transducer算子任务开发与性能调优
  • G-Helper终极指南:释放华硕笔记本潜能的轻量级控制工具
  • 2026年凯里国防班哪家好?低分进高分出与定向士官升学成新标准 - 年度推荐企业名录
  • 新买的SSD移动硬盘到手别急着用!先搞懂exFAT和NTFS怎么选(附T7实测)
  • 2026年第二季度GEO服务商按预算选型指南:
  • ChanlunX:通达信缠论可视化插件终极指南,三步实现专业级技术分析
  • 2026年凯里黔南国防军士预备班怎么选?从低分进到高分出的完整升学指南 - 年度推荐企业名录
  • 拯救卡顿Windows 11:一键清理工具让你的电脑重获新生
  • 跨越平台壁垒:Electron音乐软件的云原生部署新范式
  • 为Claude Code配置Taotoken后端解决访问限制问题
  • QuickRecorder:3分钟解决macOS录屏难题的轻量级神器
  • 鸿蒙 HarmonyOS 6 | Pura X Max 鸿蒙原生适配 14:大屏弹窗改成侧边面板
  • 从零到一:如何用新蜂商城快速构建你的电商帝国
  • 3分钟解锁网易云音乐NCM格式:Windows用户必备的免费图形化解密工具终极指南
  • 2026南昌医疗纠纷律师评测:哪家负责任?教你筛选靠谱医疗纠纷律师 - 品牌2025
  • 国内合规沟槽管件厂家技术解析与选型参考 - 奔跑123
  • 如何快速备份QQ空间:终极自动化解决方案指南
  • 海南美尔居家具:海口KTV金属模块找哪家 - LYL仔仔
  • 2026年5月济南黄金回收哪家好?8家实测 + 避坑全攻略 - 生活测评君
  • 820亿Credits等于多少Tokens?
  • 从‘形态学’到‘TIN加密’:一文讲透LiDAR点云地面滤波的演进与选型指南