工具介绍:
Higress是基于阿里内部两年多Envoy Gateway实践沉淀,以开源Istio+Envoy为核心构建的云原生API网关,实现流量调度、服务治理、安全防护三合一的高集成能力,深度适配Dubbo、Nacos、Sentinel等主流微服务技术栈。产品分为免费开源版和云上商业化企业版两类,针对DeepSeek做了专属功能增强,已服务Soul、快手、极氪汽车等头部企业,相比传统网关性能优化90%以上,可节省50%资源成本,为Agent开发、LLM API管理提供可靠的生产级支撑,助力企业低成本构建AI中台。
效果展示/案例参考:
Soul接入Higress后,多大模型调用请求的调度效率提升85%,网关侧资源消耗降低47%,全年网关运维成本减少超百万元;快手使用Higress统一管理10+大模型的API调用,协议转换耗时缩短90%,AI应用上线周期从2周压缩到3天;极氪汽车通过Higress实现车内智能体调用的全链路安全防护,异常请求拦截率达100%,智能服务可用性提升至99.99%。
核心功能:
- 大模型统一协议转换:支持100+国内外主流大模型的统一协议适配,降低多模型调用开发成本
- LLM API全生命周期管理:覆盖大模型API的接入、调度、限流、监控全流程管理
- Agent开发支撑:为AI智能体开发提供稳定的请求转发、流量调度能力,降低落地门槛
- 三合一网关能力:集成流量调度、服务治理、安全防护三类核心能力,无需额外部署多套工具
- 微服务技术栈深度集成:适配Dubbo、Nacos、Sentinel等主流微服务组件,无缝对接现有架构
- 高可用托管服务:企业版提供99.95% SLA可用性保障,7×24小时技术专家支持
- 一键快速部署:开源版本支持Docker一键启动,5分钟即可完成核心能力验证
- 资源成本优化:性能较传统网关提升90%以上,可帮助企业节省50%的资源成本
使用流程:
- 步骤1:选择适配版本,个人/小团队可选择开源版本,企业用户可申请企业版托管服务
- 步骤2:完成部署,开源版本通过Docker一键启动,企业版由官方提供当日开通服务
- 步骤3:接入业务资源,按照官方文档完成现有大模型、微服务的接入配置
- 步骤4:配置调度规则与治理策略,即可通过统一入口管理所有API请求
使用场景:
- 多模型统一管理场景:企业同时接入多个不同厂商大模型时,通过Higress实现统一协议转换,无需针对每个大模型单独开发适配接口
- AI Agent开发落地场景:为AI智能体的多工具调用、大模型请求转发提供稳定的网关支撑,保障服务可用性
- 微服务架构升级场景:替代传统Nginx Ingress等网关,为云原生微服务架构提供流量调度、安全防护、服务治理三合一能力
登录后解锁全文,体验收藏、点赞、评论等完整功能
立即登录
免责声明:本网站仅提供网址导航服务,对链接内容不负任何责任或担保。