从被动存储到主动决策：AI如何驱动数据库与大数据智能进化

WeDataUnitySemantics打破智能分析的“巴别塔困境” 业务挑战 关键思路 业务价值 业务挑战 定义优秀的DataAgent 如何建立用户信任? 关键思路 人与Agent信任的基础是什么？ 人和机器没有共同的Context “你知道我知道你是知道的” 新的协作模式，需要新的信任基础 数据分析的语义(Context)是什么? WeKnowMoreThanWeCanTell--Michael Polanyi 信任感，用户对可优化的期望 可靠的数据和知识 数据语义层 WeDataUnitySemantics解决方案 数据智能新底座 DataAgent：DataAgentEngineering WeDataUnitySemantics：构建人与机器都能理解的数据资产 WeDataUnitySemantics核心能力 核心能力： 1.Integrate：API、JDBC、语义层MCP、插件等提供丰富的下游生态对接能力2.MetaRetriever：基于结构化元数据知识索引、多路召回、混合排序能力3.SemanticModel：强大的语义建模表达能力，支持复杂指标、维度定义，基于图论的复杂指标SQL生成4.AutoAcceleration：多级缓存，自适应CTE提取合并IO、谓词下推、自动物化视图推荐和合并 WeDataUnitySemantics指标语义知识召回能力 UnitySemanticsSemQL&MCP SemanticMCP SemQL(SemanticQueryLanguage) client =MultiServerMCPClient({“WeData_Unity_Semantics”: {“desc”:“wedata统一语义层MCP”,“url”:“https://wedata-api-fusion-dev.cloud.tencent.com/mcp/sse”,“headers”: {“TENCENTCLOUD_SECRET_ID”:”腾讯云accesskey“,”TENCENTCLOUD_SECRET_KEY“:”腾讯云secretkey“,”TENCENTCLOUD_REGION“:”腾讯云可用区"},"timeout":"60","sse_read_timeout":"300","transport":"sse",}})tools =awaitclient.get_tools()agent =create_react_agent(model=llm,tools=tools,debug=True)response =awaitagent.ainvoke({"messages":"帮我统计一下近7日订单总金额的变化趋势"}) metric=[订单金额],where=[Dimension(订单状态) = '已取消' ],order_by=[TimeOutput(day) desc],group_by=[Dimension(性别别),Dimension(订单状态),TimeOutput(day),TimeOutput(month)],limit=10,time_start='2025-12-01T00:00:00',time_end='2025-12-30T00:00:00’ 业务价值 价值1:统一业务术语以及数据关系，降低数据理解门槛，促进数据价值流通和转化 价值2:实现指标口径一处定义，处处复用，真正做到：Single Source of Truth 价值3:开放MCP服务，人人可以定义自己的分析智能体 TDSQL-CServerless实现数据库极致弹性能⼒ 腾讯云数据库产品经理主讲⼈邓昕瑞 03 01 04 典型应⽤场景及案例 弹性伸缩过程中的稳定性保证 应对负载不定场景下的弹性能⼒ ·以云为基助⼒客户服务⽤户· Serverless=Faas+Baas 函数即服务FaaS（函数计算） Ø⽆需运维Ø实时弹性伸缩Ø⽆使⽤⽆费⽤Ø以API形式提供服务Ø按调⽤次数计费Ø⾼可⽤ 后端即服务BaaS Ø⽆需运维Ø⽆使⽤⽆费⽤Ø按实际使⽤计费（访问次数）Ø以API形式提供服务Ø⾼可⽤ 云原⽣数据库Serverless的发展必然性 传统云数据库 TDSQL-CServerless🎖 同机部署计算和存储，剩余资源难以利⽤ 解耦计算与存储，资源利⽤率⾼，跨机扩容快 Ø存算分离,不会产⽣碎⽚ØRedolog同步,主从延迟极低Ø秒级横向扩展Ø纵向弹性规格,⽆需提前扩缩容Ø⾃动启停,⽆使⽤不计费 Ø存算⼀体,较易产⽣碎⽚ØBinlog同步,主从易延迟Ø横向扩展耗时长Ø规格固定,需提前扩缩容Ø进程常驻,⽆使⽤也计费 TDSQL-CServerless架构介绍 计算层、存储层依托于TDSQL-C架构 Ø计算节点秒级伸缩，⽀持跨机弹性Ø存储层池化资源，秒级可拓展性存储 管控发起启停任务、监控资源使⽤情况 Ø触发扩缩容Ø暂停计算层Ø上报计费 利⽤恢复感知器秒级冷启动，链接保持不断 秒级采样，按量计费，不使⽤不计费 实时 按实时对CCU计费计算资源 资源包预付费付费⽅案对⽐同规格包年包⽉刊例价最⾼降低25% 应对负载不定场景下的弹性能⼒ ·以云为基助⼒客户服务⽤户· 极致纵向弹性,资源如⽔源般可涓流可倾泻 其他⽅案 TDSQL-CServerless🎖 秒级采样，按量计费，不使⽤不计费 集群级Serverless资源细粒度更⾼,各节点可独⽴弹性 资源混部主从节点形态可不同,丰富业务场景 数据库代理读写分离,负载均衡业务⽆需扩缩容情况 精准调度调度器全⽅⾯分析资源使⽤情况保证资源合理使⽤ 弹性伸缩过程中的稳定性保证 ·以云为基助⼒客户服务⽤户· 扩缩容稳定性内核优化 缩BP时⽑刺清理 ⽑刺、慢查询出现原因 Ø需要刷脏，持久化Page会存在IO瓶颈Ø缩容过程中需要多次遍历freelist和lrulist，遍历过程中持有mutex锁时长可能较长Ø需要获取BP全局锁，执⾏时间过长，容易产⽣⽑刺 优化遍历待回收BPChunk区域，灵活控制缩容步长，缩容过程中完全⽆⽑刺，⽑刺数量100%↓ IO瓶颈解决⽅案 Ø采⽤Redolog在存储层异步⽣成Page，计算节点不需要刷脏直接丢弃淘汰Page MUTEX锁瓶颈解决⽅案 Ø减少持锁范围和时长Ø按地址遍历需要被回收的chunk中的blockØ加锁区间由整个lru链表变成单个block 全局锁瓶颈解决⽅案 Ø延迟释放chunks和提前预分配chunksØ优化resizehash算法，改为异步模式 跨机扩容链接保持能⼒ 利⽤Proxy的防闪断能⼒，在发⽣跨机扩容时有效防⽌链接闪断，保证95%+链接保持 跨机发⽣原因 Ø业务流量负载上升，触发扩容动作Ø实例所在物理机余量⽆法承载⽬标规格，触发跨机扩容 PROXY防闪断能⼒ ØProxy阻塞客户端请求并暂存Ø与旧主断联，向新主节点接连重新建会话状态，并发送暂存语句 不同语句处理办法 Ø未提交事务，等待事务结束，超时关闭ØPrepare语句，预编译语句缓存，按需重放Ø系统变量等，保存kv重连时重放Ø临时表、锁、慢查，等待完成，超时关闭链接 典型应⽤场景及案例 ·以云为基助⼒客户服务⽤户· Serverless典型应⽤场景 周期性流量业务 低频访问业务 ⾯向会有明显的周期性业务场景，流量会有明显的波峰波⾕特点。 个⼈博客、垂直社区论坛、微信⼩程序与云函数、云开发、微信云托管有深⼊的合作 开发测试环境 归档类场景 针对冷数据量较⼤，同时访问频率较低的业务场景 ⼯作时间：周⼀⾄周五的⼯作时间使⽤时则收费下班时间：夜间以及周末不使⽤不收费 活动类场景 洪峰流量场景 ⾯对突发洪峰流量，可以快速扩容，防⽌OOM 在活动期间会有⼀个⽐较⾼的负载，但活动过去之后，负载就会降低，同时需要及时应对可能突发的⾼负载事件。 某社区平台Serverless助⼒0抖动 ⾯临挑战：热点话题爆发⼒强，资源上限遇瓶颈 Ø热点话题突发性⾼，如未进⾏及时扩容会导致OOMØ提前购买⾼规格数据库预防洪峰流量，成本消耗极⼤Ø业内Serverless数据库⾃动弹性抖动明显，读写性能要求较⾼ 云原⽣TDSQL-CServerless解决⽅案 Serverless数据库开启resizeBu™erPool能⼒，助⼒弹性平滑⽆抖动，为业务保驾护航 Ø优化遍历待回收BPChunk区域Ø灵活控制扩缩容步长,扩缩容过程中完全⽆⽑刺Ø采⽤Serverless弹性架构，合理规划资源，成本降低50%+Ø⼀主多从架构，轻松应对洪峰流量所需的资源上限 某证券股票业务负载不定，降本40%+ ⾯临的挑战:股票业务流量会有明显的波峰波⾕，爆品股票⽆法预估，灵活弹性尤为关键 Ø爆品股票流量⼤，不及时扩容可能会导致OOM，当前业内数据库扩容时长较慢Ø每周周期性迎来股票峰值，⼤部分时间访问量⼩，资源浪费较为严重Ø只读流量较⼤，业内Serverless只读节点扩容效率低，不可灵活配置 云原⽣TDSQL-CServerless解决⽅案 ✔采⽤⼀写⼋读架构，通过Proxy做读写分离 ✔⾃动启停能⼒灵活控制热点和冷门股票 Ø⽆流量⽆访问时，节点⾃动暂停，不使⽤不付费，当有流量访问时，秒级冷启动保证业务不受影响Ø添加只读Serverless节点，保证在交易⽇时流量洪峰性能稳定Ø业务呈现明显的潮汐特征，使⽤Serverless数据库帮助企业降本40%+Ø只读节点快速横向拓展，保证洪峰流量来临时的秒级弹性 TDSQL-CServerless已实现与微信⽣态互通 腾讯云原⽣数据库TDSOL-CServerless实现与微信⽣态互通，联合微信⼩程序云开发，创造开发者使⽤数据库新形态。已为接近50万⼩程序开发者提供了⼀站式开发云服务。 同时，TDSQL-CServerless也联合CodingDevOps，⽆服务器函数SCF、轻量级服务器、物联⽹平台、云实验室等为企业和开发者提供⼀键部署多端运⾏的全套解决⽅案。 感谢倾听 腾讯云数据库产品经理主讲⼈邓昕瑞 中小企业高性价比选择 云数据库MySQL全新产品架构介绍 扶婕腾讯云数据库高级产品经理主讲人 03 02 01 04 高性价比方案 产品简介 客户案例 业务背景 业务背景01 业务爆炸式增长，海量数据面临的运维挑战 发展趋势：流行度第一的开源数据库MySQL 国内企业使用率第一 目前最受欢迎的开源关系型数据库 据调查数据，78.7%的受访者所在企业正在使用MySQL，其在中国的使用率相比其他国外数据库排名第一 全球流行趋势常年保持前三，开源第一 MySQL在全球数据库的流行度长期排在前三，且是TOP3数据库中唯一的开源数据库，流行趋势分几乎是第四名的83% 业务挑战：开源MySQL面临的问题 业务爆炸式增长，海量数据面临的运维挑战 极限场景性能难保障 管理复杂度高 MySQL支持的外部插件较多，且鱼龙混杂，质量参差不齐，要管理好高可用MySQL集群复杂度很高 在极限场景如大并发、慢SQL多、存在热点情况下，数据库优化手段优先且难度大 安全合规 周边系统成本对比 要满足安全合规要求，基本只有企业版才能支持，而官方企业版需要支付额外的费用 数据库监控系统数据库运维系统数据库备份系统 云数据库MySQL解决方案 高可用拓展 支持三节点、强一致、只读实例、灾备实例、数据库代理等可用性架构 超高性能 企业级TXSQL内核，提供超高性能。支持IBP优化、热点更新、SQL限流等 易用性强，TXSQL企业级内核加持架构扩展性强 完备可用性 全量备份、物理备份、逻辑备份、分