PG数据库的数字化运维-臧强磊.pdf

1、PostgreSQL中文社区第13届PostgreSQL中国技术大会聚焦云端创新汇聚智慧共享臧强磊PG数据库的数字化运维PostgreSQL中文社区数据库运维中的最大困难是未知PostgreSQL中文社区一个好的数据库要有哪些优点稳定 不宕机 不出错 少卡顿高效 大负载 高性能 多场景易用 易安装 易管理 易运维除此之外，还需要看得见、摸得着运维数字化是解决这个问题的关键PostgreSQL中文社区运维数字化转型的实现路径提取业务的数字化要素实现数字化要素自动化采集数字化描述构建业务的各类分析模型实现业务状态的各种自动化分析数字化模型通过数字化手段向各类业务参与者呈现业务业务部门实现对业务全方

2、位的实时感知数字化呈现通过数字化手段实现大量业务执行的自动化通过数字化执行提升业务执行效率和执行质量数字化执行随时可以通过数字化分析手段对业务进行考评决策层可以随时了解业务的各种细节数字化评估PostgreSQL中文社区可观测性-数字化运维的基础可观测性最初指的是一种管理策略。将最相关、最重要和最核心的问题提供给运维人员，并将关键信息与常规信息分离。可观察性是控制理论中的一个要素，它说 IT 系统的内部状态可以从它们的输入和输出之间的关系中推断出来。因此，它也经常被描述为自上而下的评估。可观察性的挑战不在于从观察中得出内部状态，而在于收集正确的观察。“可观测性”最初在分布式系统中被提出，目前已

3、经被延伸到各个领域。日志告警指标体系全面跟踪用户体验指标难以标记和排序，并且难以用于故障排除；对日志进行排序和汇总以得出有意义的结论或关系可能具有挑战性；跟踪会产生大量不必要的数据；用户体验可能不够准确。PostgreSQL中文社区可观测性VS监控监控 对预知的场景采集数据并设置仪表盘；依赖于已知知识的提前假设；过多的告警可能会淹没运维工作；比较容易发现唯一性问题，无法定位根因；可观测性 更注重于问题分析；即可供提前假设性的问题分析，也可以用于未知问题分析；尽可能收敛告警，将多种告警因素归类于某个问题；可以用于复杂的场景下的问题定位。PostgreSQL中文社区PG的可观测性能力配置信息运行状

4、态数据对象统计数据运行指标等待事件活跃会话历史*TOPSQL*诊断跟踪日志信息数据库可观测性监控预警系统日检状态巡检月度巡检健康度分析SQL审计安全审计容量管理根因溯源性能优化高可用切换*部分生态产品具备，或通过插件获得PostgreSQL中文社区全面的可观测性数据与运维场景场景全面可观测性原因监控数据库是否存活否仅需要采集数据库状态信息基线预警否仅需要采集需要预警的指标，无需分析根因慢SQL采集与优化否仅需要采集与分析慢日志，并使用Explain去做TRACE数据库巡检是需要全面分析数据库状态，需要大量的历史数据而不是某个快照的状态信息根因分析是不仅需要全面的当前数据，还需要故障发生前某个时

5、间段的历史数据，甚至需要通过历史数据的 比对才能发现异常数据库优化是需要通过全面的分析找到系统中存在的主要问题点，并选择重要的因素进行优化容量预测是需要通过全面的负载、性能、容量变化的历史信息，才能获得较为准确的容量预测关键SQL跟踪与变化预警是需要跟踪SQL的变化，通过系统状态的变化状态进行辅助分析数据库故障预警是需要采集与分析较为全面的数据库指标，才能较大范围覆盖数据库故障类型，并能提供较强的故障预警与分析能力不同的运维场景与运维需求对可观测性能力的使用需求是不同的。最简单的监控不需要特别复杂的指标与数据，对于数据库的可观测性接口的使用也是与自己的运维需求决定的。PostgreSQL中文社

6、区PG可观测接口概述OS信息system_stats插件基础运行状态PG_STAT_*等/PG_*等待事件pg_stat_activityTOP_SQL慢SQL日志插件pg_stat_statements/pg_stat_monitorASHpgsentinel/pgsampler插件openGauss:ASP:GS_ASP/DBE_PERF.LOCAL_ACTIVE_SESSIONAWRpg_profile插件PostgreSQL中文社区WAIT EVENT 基本接口：pg_stat_activity 为AWR提