谢仲天-TencentOS Server云原生技术实践v2-p.pdf

1、TencentOS Server云原生技术实践2022.7.15腾讯云OS团队1.腾讯OS技术积累2.TencentOS云原生网络实践3.TencentOS RUE(如意)4.TencentOS 悟净5.其他云原生特性6.下一代云原生操作系统(全栈国产化)目录腾讯OS技术积累0112年磨一剑2010年开始自主研发代替外购SUSE2011年发布第一个版本TS1精简内核稳定性/性能提升新硬件支持新技术引进功能定制持续运营打磨2019年发布TS3输出到公有云客户：80%覆盖率对外开源2021年规模1000万2016年发布TS2自研覆盖99%支撑微信、QQ、游戏等核心业务2020年OpenCloudO

2、S社区成立打造生态、引领核心技术实现开源和商业的闭环自主研发时代自主研发运营、持续打磨创新研发时代向外生长、社区生态、技术引领TencentOS Server简介：十年积累，千万节点2010年开始研发，10+年积累1000万规模超千万，行业领先99.999%可用性5个9，满足企业级要求TencentOS Server自2010年研发，历经10+年技术积累，自研内核核心技术，系统全面优化，支持国产主流硬件平台；商用节点数达1000万级，支撑12大行业客户核心系统，经历海量场景考验私有化场景拓展TS3，5.4内核打磨成熟2022年Tencent Server云原生能力总览云原生内核(基于5.4)云

3、原生服务能力行业领先Ebpf/Cilium全面支持性能、灵活性、安全性Cillium是新一代的K8s网络插件，依赖内核ebpf。内核关键特性ebpf全量支持，全面支持cilium新特性容器可视化能力增强(云原生SLI)可维护性CPU弹性调度降本增效容器级别的专业监控指标；黑匣子常态化运行，捕捉随机异常抖动业界难题；异常主动上报，提供毫秒级响应内存分级卸载(悟净)降本增效统一资源隔离(RUE)稳定性/性能/降本增效CPU隔离、内存隔离、IO隔离、网络隔离解决不同优先级容器之前的隔离性问题，保障高优先级容器的服务质量高可用云原生网络可靠性容器资源视图隔离可用性容器化全局资源，解决富容器场景下的业务

4、可用性问题MPTCP(mutipath tcp)链路故障failover-多路径TCP&交换机ECMP算法解决突发流量导致资源浪费问题，降低容器的CPU资源申请，降低成本通过对业务压力自适应画像，对内存做动态的冷热分级回收利用，在保证业务服务质量的情况下，降低整机的内存消耗qGPU(GPU隔离和共享)降本增效(GPU)通过OS层的黑科技，分时复用GPU资源(GPU和显存)，提升GPU资源利用率容器网络跟踪系统可维护性复杂云原生网络架构下，网络包的全生命周期跟踪、诊断工具云原生网络实践02Cillium支持/Ebpf支持网络包全链路跟踪和诊断工具集安全容器网络和优化高稳网络6Cilium 重要f

5、eature支持，重要落地项目tc-bpf 功能集支持EBPF方案典型产品，客户案例cilium v0.11及之前cilium v1.8-XDP Load Balancing-socket based load balance-sesson affinity某游戏客户(XDP 用户态协议栈）cilium v1.5-Service Mesh socket map/redirect 功能集支持腾讯云TCM(服务网格)-socket level EBPF 功能集支持-XDP 功能集支持-namespace cookies功能支持某教育客户(EKS 基于ipvlan/tc-bpf端口复用）cilium

6、 v1.9-iptables by pass-neigh redirection 功能集支持腾讯云TKE(cilium整体解决方案,服务于多个重点客户)某游戏客户(XDP 网关)7Cillium支持：代码分析一、ebpf移植整体情况：移植的补丁数量约350个，移植的特性（功能）数量约20个二、与5.10特性对比条目TencentOS serverupstream kernel 5.10cilium相关缺失bpf 类型30300bpf map类型28280bpf helpers 函数1491550https:/docs.cilium.io/en/stable/operations/system_