登录
注册
个人信息
我的订单
我的报告豆
我的优惠券
我的笔记
我的阅读
我的收藏
我的下载
我的上传
我的订阅
在线客服
退出登录
回到首页
AI
搜索
发现报告
发现数据
发现专题
专题报告
专题百科
研选报告
定制报告
VIP
权益
付费社群
发现一下
行业研究
公司研究
宏观策略
财报
招股书
会议纪要
Token
低空经济
十五五
AIGC
大模型
当前位置:首页
/
行业研究
/
报告详情
网易-孟祥勇- 中间件同城多云高可用平台建设
信息技术
2024-08-21
2023第十二届全球TOP100软件案例研究峰会
胡诗郁
核心观点与关键数据
讲师简介
孟祥勇,网易数帆云原生中间件资深架构师,曾就职京东、同盾,Kubernetes社区贡献者,专注调度、中间件、Kubeflow领域。
负责网易数帆中间件集群联邦平台建设,支持Redis、ES、Kafka、Rocketmq、ZK等中间件的联邦,已在多家银行、证券落地使用。
负责网易数帆中间件Finops系统建设,具备成本展示、资源预测、负载感知调度与重调度能力。
PART01 亮点介绍
高可用性:通过联邦调度实现跨集群中间件的高可用部署。
PART02 案例背景
问题与挑战
:
集群故障与有状态应用管理难度高。
多云管理组件对有状态应用(如中间件)支持不友好。
PART03 破题思路与成果
破题思路
:
利用Karmada实现资源模板(K8s原生资源或自定义资源CR)的差异化传播。
联邦调度功能包括:集群亲和、集群拓扑、实例拓扑、污点容忍、数量约束、集群名/label匹配、直接复制/权重。
组件介绍
:
联邦调度器
:
调度单位为中间件CR(包含分片、主从、角色等组件,需一次性调度成功)。
半数约束:根据集群数量N和实例数M,合理分配实例(如M>N时,每个集群分配M/N个,剩余平分;M<N时,部分集群为0)。
扩缩容约束:通过过滤优选算法(如资源余量算法)计算扩容组合。
联邦控制器
:
故障迁移逻辑:手动变更或自动调度,重新生成BaseID、覆盖策略、分发策略。
跨集群流量治理
:
服务发现:通过CoreDNS插件构建跨集群Endpoints,指定hostname实现域名解析。
域名解析:Domain-Register重写CoreDNS etcd插件,自动注册/更新跨集群域名。
PART04 案例复盘与总结
案例复盘
:
熟悉Karmada和Kubernetes原生调度能力,结合中间件特性自研跨集群调度器。
提出便捷的跨集群流量治理方案。
深入对比Karmada、VirtualKubelet等开源组件,优化联邦组件选型。
案例启示
:
业务创新需兼具业务模型与云原生技术深度积累。
组件成熟时,应在上层抽象而非改造组件本身。
PART05 下一步计划
将自研调度器功能反哺社区,推动有状态应用在多云时代的高可用建设。
你可能感兴趣
云原生中间件平台助力企业运维体系建设
网易
2023-03-09
0-4 李庆丰-微博亿级用户高可用架构体系建设
信息技术
2023 Gdevops全球敏捷运维峰会
2023-07-27
vivo业务高可用建设实践
中国数据智能管理峰会
2023-04-15
【盘中宝】高级别自动驾驶新进展,智能网联汽车场景库建设平台发布,智能驾驶渗透率持续提升,这家企业前瞻布局智能驾驶领域相关核心部件
未知机构
2023-11-03
EPG、DCG、PMG三驾马车建设页岩油气平台能力,引进前贝克、休斯壳牌高管担任总裁,研发取得阶段性成果,继续强推
机械设备
华创证券
2014-08-22
3月电商月报:高基数下增速放缓,平台电商持续建设内容生态
文化传媒
交银国际
2024-04-17
持续关注STS8600测试机验证进展业绩高增,不断加强高端平台建设
国泰海通证券
2026-05-05
业绩保持高增速,平台建设稳步推进
电气设备
太平洋证券
2018-10-31
2015年半年报点评:业绩保持高增速 出境综合平台建设进行时
休闲服务
国信证券
2015-08-24
4-2 Hologres:阿里建设高吞吐、多负载的实时数仓平台
信息技术
DataFunSummit2022:多维分析架构峰会
2022-07-18