找回密码
 立即注册
首页 业界区 业界 面试官:如何实现企业级MCP分布式部署? ...

面试官:如何实现企业级MCP分布式部署?

昆拗干 昨天 16:02
作为一个企业级的 MCP Server 服务,只运行在单机环境上是远远不够的,我们需要让它部署在多个机器上,并且支持分布式的调用,这其中当然还包括负载均衡和节点变更的动态感知等内容。
那么如何让你的 MCP 服务支持这些功能呢?接下来,我们一起来看。
实现方案

MCP 生产级别的分布式部署方案主要包含以下两种实现:

  • MCP Server + Nacos 注册中心:最原始的实现方式,借助 Nacos 提供的健康检查机制,加上负载均衡器实现了分布式部署实现流程如下图所示:
1.png


  • 使用 Spring AI Alibaba MCP Gateway 实现分布式部署:Spring AI Alibaba MCP Gateway 是基于 Nacos 提供的 MCP server registry 实现,它为普通应用建立一个中间代理层,从而实现了分布式部署的效果。一方面将 Nacos 中注册的服务信息转换成 MCP 协议的服务器信息,以便 MCP 客户端可以无缝调用这些服务;另一方面可以实现协议转化,将 MCP 协议转换为对后端 HTTP、Dubbo 等服务的调用。基于 Spring AI Alibaba MCP Gateway,您无需对原有业务代码进行改造,新增或者删除 MCP 服务(在Nacos中)无需重启代理应用,它的执行流程如下:
2.png

显然第二种实现方式更简单,且功能更强大,那我们来看下 Spring AI Alibaba MCP Gateway 的具体配置和代码实现。
具体配置和代码实现

以 Nacos 3.0 版本为例,它的实现步骤如下:

  • 在 nacos 中进入 mcp 列表管理功能,创建一个 mcp server。
3.png


  • 在 mcp server 中添加 tools 相关内容,表明要暴露的 tools 信息。
4.png


  • 在 tools 信息中,需要配置一个 request template,格式与 higress 目前支持的格式完全兼容
  1. {
  2.   "requestTemplate": {
  3.     "url": "/v3/weather/weatherInfo?key={{ .config.credentials.api_key.data }}",
  4.     "argsToUrlParam": true,
  5.     "method": "GET"
  6.   },
  7.   "responseTemplate": {
  8.     "body": "response value {{ .value }}"
  9.   }
  10. }
复制代码

  • 在工程中引入相关依赖
  1. <dependencies>
  2.   <dependency>
  3.     <groupId>org.springframework</groupId>
  4.     spring-web</artifactId>
  5.   </dependency>
  6.   
  7.   <dependency>
  8.     <groupId>com.alibaba.cloud.ai</groupId>
  9.     spring-ai-alibaba-mcp-gateway</artifactId>
  10.     <version>1.0.0.3-SANPSHOT</version>
  11.   </dependency>
  12.   
  13.   <dependency>
  14.     <groupId>org.springframework.ai</groupId>
  15.     spring-ai-alibaba-starter-nacos-mcp-server</artifactId>
  16.     <version>1.0.0.3-SANPSHOT</version>
  17.   </dependency>
  18. </dependencies>
复制代码

  • 配置 spring.ai.alibaba.mcp.nacos 相关信息
  1. spring:
  2.       ai:
  3.         alibaba:
  4.           mcp:
  5.             nacos:
  6.               server-addr: 127.0.0.1:8848
  7.               namespace: public
  8.               username:
  9.               password:
  10.               gateway:
  11.                 service-names:
  12.                  - echo-server
复制代码

  • 启动服务之后,会读取 nacos 中持有的 mcp server 相关配置信息,对外暴露出来,供 mcp client 进行调用
5.png

这样就完成了企业级 MCP 分布式部署与动态更新的问题,其中包括流量的负载均衡、节点变更动态感知等关键技术的具体实现。
小结

MCP 在面试中被问到的概率很大,因为它是热门的 AI 技术。这其中包括 MCP 生产级别的使用问题,如 MCP 如何进行安全验证?MCP 底层实现原理?底层实现协议?MCP 服务重启后客户端如何自动重连?MCP 如何进行企业级部署?等问题,当然这些问题视频版和图文版的解析,也会陆续发布到我的《AI 常见面试题》专栏里,类似的问题我应该会整理 70~80 道,让我们一起学习和掌握知识的核心原理,找到更好的工作,加油。
参考文档

Spring AI Alibaba 官方博客
本文已收录到我的技术小站 www.javacn.site,其中包含的内容有:Spring AI、LangChain4j、Dify、Spring AI Alibaba、智能体(AI Agent)、MCP、Function Call、RAG、向量数据库、Prompt、多模态、向量数据库、嵌入模型、AI 常见面试问题等内容。
   

关注公众号(加好友):

            
作者:        王磊的博客        
出处:        http://vipstone.cnblogs.com/        
   

来源:程序园用户自行投稿发布,如果侵权,请联系站长删除
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!
您需要登录后才可以回帖 登录 | 立即注册