DAMS 中国数据智能管理峰会 DATA 基于大模型的数据库运维智能化实践 演讲人:中国银联梁克会 ·个人简介 梁克会 |中国银联信息总中心数据库专家 高级工程师,拥有13年做活库管理经验,管理的邀据库客器规摸数万,在题据库架构设计,性能 优化与故障恢复以及数据库云平台建设,智能化 运维智绘 第二日活动 运维方面具有深厚的专业知识和实践经验蓝障动优 DAMS中国数娱智能育理蜂会 数据库运维难题01 数据库运维智能化02 目录大模型应用实践03 未来展望04 DAMS中国据智能管理峰会 数据库运维难题 01 DAMS中国教据智能管理峰会 超大规模数据库运维难题- 实例粒量 巨大的压力 致据库种类 关系至孕保车,非关系型改保片 10倍 有其建特的特点和适用场量,每和盈提库排有多个前本,每个 数按库版本 而本督有不同的功能和性能,需 5倍 要运锋人员报提变际需求违行达 多 叫首企业业多的发屠,看祝库者 量不断增加,请运排工作带未了200倍 DAMS中国故娱智能育理蜂会 超大规模数据库运维难题二 01数据库中请 快 业务上是周期恶来感证,轻亡资勇供治时效要求点来恶30倍高,文付周期从月端到因,再端到天率小时, 02数据库扩缩容 各类秒杀,高销活动对支付业男提出更高的20倍 要求,数据库护拍容变的更加频紧。 03数据库日常运维 效择库日常运比操作越来越频繁,包招情改快效10倍备份还原等,并且对操作的效率要求越未越高 DAMS中国据智育理峰会 超大规模数据库运维难题三 亲构复杂 繁 现在的效择库需要高效比处理大规棋并发访问,确保款据一政性与安全性,以及实现放障志复等方面置禁拍超来越复杂,微念也超来 垃多 数据库分散 效延库分收在不同地区,不同部门,给运非工作带来了管理和协调 运维工具多栏 企业缺无有效且统一的运生工具和系统,导致运注人员工作效率低 下,难以应对复杂的运性任务, DAMS中国据智育理峰会 数据库运维智能化 02 DAMS中国教据智能育理峰会 基于容器的智能化数据库云平台(DBaaS) 数据库全生命周期管理 功能亮点 国 资需管理服务管理系统西像诊断优化各的恢复监控告警智能北点性,故障自禽 数据库评分健康报告 SOL审核 TAULSARESOL优化✁议 高可用切换 F国自动扩编窖 一键诊断 DAMS中国据智能管理峰会 数据库运维发展阶段 中国银联数据库云平台(DBaas) 已经进入智能化的初级阶段 2.0工具化 1.0人工/斯本化 C管理 3.0云化,平台化、服务化 4.D智能化 ,K写旁全由管理中售接管,自站皮,自待复、自决美等自治管理养力。几于不要人工性理 当怕 DAMS中国数据智超管迎健会 数据库云平台应用效果 1分神内及通中在线扩场整力 效拓库背弹能力 否2利用审任,医本高透源分配平升 30% 交材H所K.量 80% 交付属期 日一>天 50倍识片管理效车 胖本增效提质 DAMS中国数娱智能管理蜂会 大模型应用实践 03 DAMS中国教据智能管理蜂会 大模型技术概述 大模型技术大模型技术大模型技术特点应用 庭学司 大德型技术是指大技型技术具有大模型技术在性强大的白密准高 可成帮运 技术 玛解和三皮县有广场 的热月效S abaseTechno DAMS中国教据智就育理蜂会 引入大模型技术的必要性 挑战与困难 阳着扫量的不增长,传的的股控库运性方已经戏以法是清求,需斐寻求新的解以方案, 数据库运维现状大模型技术的优势 数提车运详而临好量虎大,数大模型技术具有决大的改密处理 保牛产品和类多,运年人员改量能力和智伦决策能力,论够有效 不足,运半损作效率低下等间题。解决效遇库运辅中的各种技。 DAMS中国据智能育理峰会 大模型应用场景1 知识问答 通过大模型实时草保 运性如识问窖。 大模型应用场景2 D 参数解释 通过大模型完成一键解释草 竭库争题,提高用户满宽度, DAMS中国故娱智能育理峰会 大模型应用场景3 D 66 参数优化 世用大模型对原保件的 DAMS中国数据智稳管迎整会 大模型应用场景4 配置文件格式检查 世用大模型对原保件的 yanl,Jcon,tonl年女件 进行情式快宣 DAMS中国数娠智能育理蜂会 大模型应用场景5 慢SQL优化 通过大换型一键分机查询读的语句,快速优化耗时设长,资 源消耗较大的语句。 DAMS中国故据智稳管迎整会 大模型应用场景6 QQ 自然语言转SQL 通过大项型实时实现 自然语喜转虚SL语句, DAMS中国故娱智能育理峰会 大模型应用场景7 解释SQL语句 利用大模型对S0L语句舒行, 将S1语句转换为白然治言, DAMS中国数娱智能育理蜂会 大模型应用场景8 4. 优化SQL语句 大预型可以化SGL语句,提高查询效率, DAMS中国故娱智能育理峰会 大模型应用场景9 国国 告菩处理 大型可以根据告替 推荐处理步需, 提供告警处理的效率 DAMS中国数据智能管迎健 大模型应用场景1011,12.. 参数优化资源预测 利用大模型收集放揭库运行日志,查通过训练和优化,校型可以学习到 询语包,性能指标等致据,对资提库资源利用率与各种因泰之问的关系。 格款进行忧化。日出分析预测末来一投时问内数库资的 利用率。 表结构优化故障诊断 通过大模型分析表上索引是否合理, 并且提供忧化注设和添加,制除索引 的语句。 通过分析效据库的借误口志,性能题据以及用户反错等文本信息,大语言携型能够识别出潜在的问随祺 式,并给出相应的诊审注议。 DAMS中国教据智能管理蜂会 大模型在数据库运维中应用的基础 准确性判断依据 白 目 模型评估 数据质量 应用场景 通过大模型评估系统回 数据质量直接彩响智能 不同应用场景下,准确 答与工答案的相似度 问答系统的准确性 性划所标准不同 DAMS中国据智能育理峰会 大模型在数据库运维中应用的提升准确性的方法 数据预处理 模型训练优化 用户反馈循环 洁洗,分词,标注, 提高模型训练效率 调整参数,如学习 率,批次大小,优 收集用户反馈, 续优化问答系统 化摸型性能 持 DAMS中国教据智能管理峰会 大模型在数据库运维中应用的关键 快准 在效据库云平台病江在数提库云平台✁设 设芳干域点,若干场景,补充这些 以一让就将问医发送场累问医的上下文以 到大模型,另外,及提示河,引导大慎 换型的反爆的结果可型口答的方向,让月 以直接应用卖者经过户期一次就可以得到 核少路径得到店用准码的答系 DAMS中国数娱智能育理蜂会 大模型在数据库运维中应用的难点 用户习惯很难改变AI回答不准确AI资源不足 用户谨常习慢了一套待定的工作流大模型在处理茅些复杂问题时,企业缺乏足够的大状型计算资源程和工具,对这些流程和工具产生可能无法准确理解请境,导致提将无法高效处理数据,影响图依响,因此:门对于开技术或新方供的菩案与实际情况有所出入,速度和结果准确性,限制了资源 法的核受度和改变意愿注往获低。不能直接应用于生产作。预测,日志分析等运准场景应用 DAMS中国教据智能管理蜂会 未来展望 04 DAMS中国教据智能管理峰会 大模型对数据库运维行业的深远影响 R 自动化运维 智能化决策 个性化服务 大模型可以自动检测和修复放据库问题,减少人工 大模型可以分析效据库运行效据,提供智能化的运维决 大模型可以满足月户不同的运维需求,提供个性化的运维 干预,提高运维效率, 策✁设,提高运维质量, 方案,提高客户满意度 DAMS中国据智能管理峰会 数据库运维技术发展趋势与预测 大模型在数据库 运维的应用 技术挑战与应对策略 未来数据库运维应用场景 预测大夜型将在效招库运 及测大夜型在效巧库运半中 预测大模型在效据库运毕的 中发挥重要作用。提高运毕 可能面临的热术排战。如效 应用场景将更深入。如智能 效率和准确性。 提安全、校型隐定性等,需 亚关注和解决、 监控,资源预测等,这些场 景需要消耗大量计算资源。 00lo DAMS中国故娱智能育理蜂会 技术发展趋势与预测 数据库运维 生态构✁ 人才培养 大损世在数托库运维中的应用, 核✁以大模也为恢心的整托库 培养具备大模型应用能力的数 如智能监控,故厚顾测,性能 优化等, 运姓生态,包括工具,平台, 服务警 活比运性人才,性动行业凯新 DAMS中国数娱智能育理蜂会 DAMS 中国数据智能管理峰会 DATA THANKYOU!