Cloud Native

17 篇内容

工程实践SelectDB 技术分享

秒级弹性、最高降本 70%:SelectDB Serverless 如何重塑云数仓资源效率 阿里云 SelectDB Serverless 可实现资源按需供给与按使用量计费,在负载高峰时补齐资源,...

文章讨论云数仓资源管理中长期存在的矛盾:业务负载波动大,固定规格资源常按峰值锁定,导致平均利用率低;传统存算分离架构弹性慢,扩容伴随缓存预热和数据重分布,容易引发查询延迟抖动。作者提出 SelectDB Serverless 的解决方案,通过计算、缓存、存储三层独立解耦,支持秒级原地纵向伸缩,单集群最高16倍弹性区间,并采用“扩快缩慢”策略——CPU 5秒均值或内存瞬时利用率超过60%触发扩容,CPU与内存同时低于30%且持续1分钟才渐进缩容,同时引入AI辅助决策。文章还给出选型参考:峰谷特征明显、可释放计算资源超过28%时Serverless才具成本优势;纵向弹性有16倍边界,极端场景需横向伸缩约3分钟。内容主要基于产品设计与机制说明,缺少独立用户验证数据。

推荐收录,因为它不只是产品宣传,而是提供了具体的弹性架构设计:三层资源解耦、扩缩容触发阈值、原地纵向伸缩机制和选型成本阈值,对云数仓、Serverless 或弹性架构设计的读者有直接参考价值。可迁移的是“扩快缩慢”的弹性策略和计算/缓存/存储解耦思路;需注意其厂商视角,部分性能数据未经独立验证。

技术文章Kubernetes Blog

How to Pretty-Print Your Kubernetes YAML as KYAML and Why You'd Want To

文章介绍 KYAML,这是 Kubernetes SIG CLI 提出的 YAML 严格子集方言(KEP 5295),旨在消除标准 YAML 编写 Kubernetes 清单时的常见陷阱,如缩进敏感、静默类型转换和缺少注释支持。KYAML 强制使用显式大括号、方括号和字符串引号,同时保留注释和尾随逗号,使结构不再依赖空白,并介于 JSON 和 YAML 之间。文章还详细说明了通过 kubectl -o kyaml、sigs.k8s.io/yaml 的 yamlfmt 工具以及 Google yamlfmt 将现有 YAML 转换为 KYAML 的具体方法,并指出 KYAML 不改变现有工具兼容性,是一种可选的团队协作习惯。

推荐收录,因为它提供了 KYAML 的动机、规范要点和多种可执行转换方案,并明确说明其适用边界与兼容性。对于需要维护复杂 Kubernetes 清单、使用 Helm 模板或希望减少配置错误的团队,文中关于 YAML 陷阱的梳理和工具链使用方法可以直接迁移到日常工程实践中。

工程实践知乎 - 携程技术

200G内存尖峰、数十万Pod迁移:携程Karmada规模化治理实录

文章系统回顾了携程从Kubefed到Karmada的多集群治理演进,重点围绕架构选择、生产落地和规模化优化展开。核心方法是在联邦层保留低频全局能力(资源分发、策略表达、跨集群迁移),将高频局部能力(实时扩缩容、流量切换)留在成员集群,并通过权重驱动的状态机实现数十万Pod的平滑跨集群迁移。文中详细分析了Karmada控制面在几十万级资源规模下遇到的高频状态同步、启动延迟和200G内存尖峰等问题,以及通过折叠Work、降低更新频率、分批对账、watch list等优化手段。适用边界是交易型业务的Kubernetes多集群场景,强调联邦控制面不应成为运行时强依赖。

本文是来自携程生产一线的深度工程案例,不仅解释了为什么从Kubefed切换到Karmada,更给出了清晰的架构原则、迁移机制和规模化治理细节。文中200G内存尖峰、每秒数百次Work更新导致409冲突等具体数据有很强说服力,优化思路可直接指导类似场景。适合云原生平台团队、SRE和架构师参考,可迁移的职责边界划分和控制面优化方法在多集群治理领域有长期参考价值。

工程实践Cloudflare Blog

The next generation of MCP

文章详细解读了 MCP 协议从有状态到无状态的重大升级(2026-07-28 规范)。核心变化包括:移除强制会话和 Mcp-Session-Id 头,使服务器无状态化;通过 Multi Round-Trip Requests (MRTR) 替代流式 ellitation,简化需要用户输入的场景;引入 Mcp-Method 和 Mcp-Name 头,让 HTTP 基础设施可直接理解 MCP 请求;改进授权流程(如采用 RFC 9207 防止 issuer 混淆,以及弃用 DCR)。Cloudflare 的 Agents SDK 已全面支持新规范,并展示了 Sentry、Linear 等客户的生产实践。文章指出无状态化使 MCP 服务器可以轻松运行在 Workers 等无服务器平台,而不必依赖 Durable Objects 等状态性基础设施,大幅降低部署复杂度和成本,同时保持向后兼容性。

这篇文章不仅及时报道了影响广泛的 MCP 协议变革,而且深入剖析了工程细节、部署影响和实际迁移路径,对构建 AI Agent 基础设施的开发者极具参考价值。它展示了协议设计如何在简单性、安全性和可扩展性之间权衡,为分布式系统和 API 设计提供了可迁移的经验。

工程实践Trail of Bits Blog

A few notes on AWS Nitro Enclaves: KMS integration

文章系统分析了AWS Nitro Enclaves与KMS集成时的安全威胁与防护策略。作者从被动攻击和主动攻击两个维度出发,详细梳理了数据交换攻击、CMK替换、重放攻击等具体场景,并给出了包含加密上下文、密钥承诺、CMK硬编码、TLS通道等在内的防护检查清单。此外,文章还讨论了KMS策略配置的常见错误、PCR绑定方法、端到端验证的挑战以及操作层面的风险(如密钥轮换、区域性故障、计费问题)。文末指出AWS官方SDK存在漏洞,并建议替代方案。整体内容根植于真实工程约束,但部分防护依赖于AWS内部实现细节,不完全适用于非AWS环境。

推荐收录,因为文章不是浅层介绍,而是对Nitro Enclaves与KMS结合时的攻击面进行了系统性威胁分类,并提供了可落地的安全检查清单。内容来自专业安全公司,具有较高的工程参考价值,适合从事云安全、机密计算或基础设施安全的工程师阅读。其威胁建模方法和防护清单设计思路可迁移到其他TEE或云服务安全评估中。

技术文章Cloudflare Blog

Cloudflare Workers and Containers now support inbound TCP connections and gRPC

本文宣布 Cloudflare Workers 和 Containers 新增对入站 TCP 连接和 gRPC 的支持。核心特性包括:新的 connect(socket) 处理器让 Worker 能直接接受来自 Spectrum 代理的 TCP 套接字,并可将套接字路由到其他 Worker、Durable Objects 或容器;在 Cloudflare 容器中运行双向流式 gRPC 服务器,实现全双工通信;以及通过内置的 gRPC-web 与 gRPC 互转,使 Worker 既能作为 gRPC 服务端提供 unary 和 server-streaming API,也能作为客户端调用外部 gRPC 服务。文章通过代码示例展示了从 Worker 接受套接字并转发到容器,以及使用 @connectrpc/connect 库编写 gRPC 服务的方法。这使得开发者能够在 Cloudflare 全球网络上部署任意语言的现有 gRPC 应用,特别适合低延迟语音 AI 等场景。但功能目前处于私有测试阶段,协议转换可能引入额外开销,且仅支持 TCP 协议,尚未涉及 UDP。

推荐收录,因为文章详细阐述了 Cloudflare 将 TCP 入站和 gRPC 引入无服务器平台的技术方案,包括 Socket 路由、容器集成和协议转换等关键设计,并提供了可运行的代码示例。对于从事云原生开发、平台工程或需要构建低延迟实时服务的工程师而言,这些机制有助于理解如何将现有 TCP/gRPC 应用迁移到边缘计算环境,具有可迁移的架构参考价值。注意功能仍处 beta 阶段,部分细节可能变化。

工程实践Cloudflare Blog

Dogfooding at scale: migrating cdnjs to Cloudflare’s Developer Platform

文章详细记录了 cdnjs 从旧架构(GCP Cloud Functions + GitHub 仓库 + Workers KV)迁移到 Cloudflare 全栈开发者平台(Workers、Workflows、R2、KV、Queues、Containers 等)的过程。旧架构痛点包括无共享追踪、双活存储、对象事件粘合流水线、26 个分片函数和臃肿的 GitHub 仓库;新架构以 R2 为文件单一真实源,KV 存元数据,Workers Cache 提供分层缓存,Workflows 编排流水线,并通过 Queues 和 Durable Object 实现异步阻塞。迁移中遇到字节级一致性和子请求限制等挑战,最终通过原样复制而非重新压缩解决了 SRI 哈希问题,并倒逼平台提升子请求上限至 1000 万、Workflow 步数上限至 10000 步。文章展示了该架构的弹性、可扩展性,并为未来支持 ES 模块等现代功能奠定基础,但 SRI 校验修复等遗留工作仍待完成。

这是一篇稀缺的大规模 CDN 服务迁移工程实录,直面真实约束与架构取舍,并记录了平台为适配需求而改进的共演过程。对基础设施工程师、平台架构师和 SRE 极具参考价值,可迁移经验包括可观测性设计、存储一致性保障、无服务器工作流编排及平台限制突破策略;文中的坦诚复盘(包括迁移失败回滚)使内容更可信。

工程实践Slack Engineering

Shipyard: How We Built Slack’s Next-Generation EC2 Platform

本文介绍了Slack构建下一代EC2平台Shipyard的工程实践。面对传统Chef管理长期运行实例导致的配置漂移和部署风险,团队转向以不可变性为核心的设计,通过分层黄金镜像slack-zero、服务特定AMI、烘焙与配置分离、基于指标的渐进式部署和自动化安全控制,将基础设施视为可部署制品。平台支持多架构和多操作系统,提供快速实例供应、实时库存系统Peekaboo和Reaper生命周期管理,确保集群始终运行在新鲜状态。文章还讨论了测试框架Ship Quick、紧急修复路径、秘密管理的半不可变妥协以及未来对长生命周期实例的支持计划,为大规模云基础设施现代化提供了可迁移的架构模式和运维经验。

推荐收录。本文详细记录了Slack从可变基础设施向不可变EC2平台演进的完整工程过程,包含分层镜像设计、自动化部署体系、生命周期治理和测试方法等具体实现细节与权衡,为云平台团队提供了高价值的参考案例。适合基础设施工程师、SRE及平台开发者了解如何在高负载生产环境中安全地推动现代化改造,其中的分层构建、渐进式部署和强制刷新等模式可直接迁移至类似系统。

技术文章Xe Iaso

Presigned URLs are technically a security vuln

文章深入分析了预签名URL的安全设计,揭示其本质是将SigV4签名协议原有的重放攻击防御机制转化为一种可控的功能。作者从SigV4的签名过程讲起,说明通过将当前时间戳纳入签名来限制请求有效期为约15分钟,从而避免全局nonce管理的复杂性。接着详细解剖了预签名URL的各个组成部分,展示其如何将认证信息平铺为URL参数,使任何HTTP客户端都能在指定有效期内无限次重放该请求。文章将预签名URL视为基于时间的权限凭证,并讨论了其实际代价:无法单独撤销、URL容易泄漏、每次调用都计费等。结论指出,预签名URL将签名时间限制反转成了可定时的访问功能,是构建临时分享链接的基础构件,但使用者需理解其适用边界和风险。

本文值得收录,因为它不是浅层的功能介绍,而是从安全协议的底层原理出发,清晰阐释了预签名URL的设计思路和权衡。文章适合后端开发、安全工程师和架构师阅读,帮助理解云存储临时访问机制的实现与局限,其分析的签名时间窗口、能力凭证模型和不可撤销特性可直接迁移到任何使用S3兼容存储的系统设计中。

工程实践Kubernetes Blog

Operating AI/ML Workloads on Kubernetes: A Headlamp Plugin for Kubeflow

文章介绍了一个 Headlamp 插件,用于在通用 Kubernetes UI 中直接可视化和管理 Kubeflow 自定义资源,解决运维人员需要频繁退回到 kubectl 排查 AI/ML 工作负载底层问题的痛点。作者分析了何以专用 ML 仪表板对集群操作员不透明,展示了插件如何通过直接读取 Kubernetes API 提供 Notebook Pod 状态、管线运行状态、超参数优化实验等细节,并支持自动发现已安装的 Kubeflow 组件。文中给出了具体视图示例和 map 源注册机制,最后将这一模式推广到任意 CRD 密集型平台。该方案依赖 CRD 存在,不替代数据科学家界面,但为 SRE 和平台工程师提供了统一的集群级可见性。

推荐收录。文章源于 Kubernetes 官方博客,详细展示了将领域专用平台可观测性整合进通用 Kubernetes UI 的完整工程实践:从分析运维人员视角缺口,到设计 CRD 感知的插件视图,再到具体实现与可复用模式总结。适合负责 AI/ML 平台运维的 SRE 和平台工程师,其方法可直接迁移到其他自建 CRD 平台,提升底层资源排障效率和操作一致性。

技术文章Kubernetes Blog

Kubernetes Dashboard to Headlamp: A Step-by-Step Guide

本文是一篇从 Kubernetes Dashboard 迁移到 Headlamp 的完整指南,覆盖架构差异、安装(桌面与集群内)、认证授权、多集群管理、资源浏览与调试、YAML 方式部署应用,以及清理旧 Dashboard 的全流程。文章通过清晰的步骤与检查清单,帮助团队平稳切换,并详细说明了 desktop 使用 kubeconfig 和 in-cluster 通过 OIDC 或 auth proxy 的认证方案,强调 RBAC 最小权限原则。指南还指出 Headlamp 与 Helm/GitOps 的互补关系,以及需要 metrics-server 等可选依赖才能启用资源监控的边界。整体而言,这是一份面向 Kubernetes 运维人员与平台团队的实用迁移手册,适合那些希望采用更贴近 kubectl 风格、原生支持多集群的 Web UI 的组织。

文章来自 Kubernetes 官方博客,权威性高,内容覆盖从评估、安装到清理的完整迁移路径,并包含大量可操作命令与配置示例,具有长期参考价值。适合正在或计划从 Dashboard 切换到 Headlamp 的集群管理员和平台工程师直接复用,其中的多集群切换、YAML 部署和 RBAC 适配经验也对其他 UI 工具选型有借鉴意义。

工程实践知乎 - 腾讯技术工程

腾讯Ray团队实践:K8s + Ray如何支撑超大规模AI Workload

本文以腾讯内部超大规模集群为背景,详细阐述了 K8s 与 Ray 的协同设计原则与工程实践。文章从大模型时代 AI 基础设施技术栈的演进切入,论证了 Ray 在多模态数据处理和强化学习场景中相比传统计算引擎的调度优势,并深入分析 Ray 如何通过进程级细粒度调度满足异构资源、动态分配、高容错等需求。在此基础上,重点介绍了腾讯解决跨 K8s 集群部署的联邦架构演进过程(从 Virtual Kubelet 到原生联邦),以及跨层弹性调度和自动化容灾等协同设计,最终实现了支持万卡规模的统一异构资源调度和训练稳定性提升。文末展望了更原生的联邦架构和通用分布式底座方向,对大规模 AI 平台的构建具有直接参考价值。

收录理由:文章提供了真实工业场景下 K8s+Ray 协同设计的完整工程案例,包含问题分析、方案对比、架构演替和关键决策细节,具备清晰的可迁移性。适合从事 AI 基础设施、分布式调度和云原生平台建设的工程师和架构师参考,能够帮助理解大规模异构算力调度的核心挑战与解决思路。

工程实践Kubernetes Blog

Spotlight on WG Device Management

这篇文章聚焦 Kubernetes Device Management Working Group 的成立背景、职责边界和当前重点,核心是在 AI、边缘计算、通信等硬件密集型场景下,如何让 Kubernetes 更好地管理 GPU、TPU、NIC 等专用设备。文章系统解释了 Dynamic Resource Allocation(DRA)的四阶段模型——资源建模、资源请求、调度与执行,并说明 DRA 相比传统 Device Plugin API 的关键改进:从“只能申请几个设备”升级为可表达设备类型、容量、拓扑、共享和切分等更细粒度约束。文章还讨论了跨 SIG 协作、共享/可消耗容量、拓扑感知、多节点调度以及 NP-hard 的优化难题,并给出了 DRA 未来在健康监控、可观测性和更复杂硬件建模上的演进方向。

推荐收录,因为它不是单纯的产品动态,而是把 Kubernetes 在硬件管理上的核心抽象、演进路径和设计权衡讲得很清楚,适合作为理解云原生调度与设备编排的长期参考。对于做平台工程、调度系统、AI 基础设施或 Kubernetes 扩展开发的读者,这篇文章能直接提供可迁移的 API 设计和跨团队协作方法。

工程实践Netflix TechBlog

How Netflix Simplified Batch Compute with Kueue

这篇文章介绍了 Netflix 如何把自研的批处理计算系统 CMB 迁移到 Kubernetes 生态中的 Kueue,以替换原有的排队、调度和容量管理逻辑。作者不仅解释了迁移动机,还详细说明了租户层级、保留容量与共享容量的语义、Cohort/ClusterQueue/LocalQueue 的映射关系,以及如何在不改变用户 API 的前提下完成透明迁移。文章最后总结了高 QPS 配置、先迁最复杂客户、以及引入公平共享和抢占机制等经验,并说明这些改造已在生产中支撑数百万批任务运行。

推荐收录,因为它展示的是一次真实的大规模批处理平台重构,而不是单纯介绍一个开源工具。文章对多租户容量管理、调度语义迁移、灰度与回滚、以及生产吞吐保障都有具体做法,具备很强的可迁移参考价值。

工程实践Amazon Science

Graviton5’s improved design increases speed and energy efficiency — beyond Moore’s law

这篇文章介绍了 AWS Graviton5 的整体设计升级,包括从 96 核提升到 192 核、采用 3nm 工艺、支持 DDR5-8800 与 PCIe Gen6,以及更大的 L3 缓存和改进后的芯粒互联。作者进一步解释了这些变化如何通过更好的分支预测、缓存层级、NUMA 划分和芯粒内互联来提升真实负载表现,尤其是数据库、Web 应用和机器学习推理等场景。文章还补充了 Nitro Isolation Engine 的正式验证隔离机制,强调了硬件设计与云安全之间的结合。

推荐收录,因为它不仅是产品发布,更提供了 CPU、缓存、芯粒互联、NUMA 和云安全隔离的具体设计思路,适合关注云基础设施和处理器演进的读者。尽管带有厂商宣传色彩,但其中关于真实工作负载优化与形式化验证安全性的论述具有较强的迁移价值。

技术文章知乎 - 鹅厂架构师

Kubernetes(k8s)快速入门(中篇)

这篇文章以一个微服务 Demo 为主线,系统讲解了 Kubernetes 的一组核心入门实践:使用 Minikube 搭建本地集群、用 Namespace 隔离环境、用 Kustomize 管理多环境配置、通过 Sidecar 与 initContainer 同步配置、设置 requests/limits、配置 Startup/Readiness/Liveness Probe,以及通过 Service 暴露集群内外访问。文章的重点不在抽象理论,而在一套可跟做的部署流程和 YAML 组织方式,适合用来建立对 K8s 基本对象与常见运维模式的整体认知。其适用边界也比较明确:这是偏入门和示范性质的实操教程,适合作为上手参考,但不是生产级最佳实践的完整指南。

推荐收录,因为它把 Kubernetes 的多个核心概念放进了同一个可运行 Demo 中,能帮助读者把 Namespace、Kustomize、探针、资源限制和 Service 这些碎片知识串成完整链路。对刚接触容器编排、想理解“如何把应用真正部署到 K8s 上”的读者尤其有参考价值。

工程实践知乎 - 皮振伟

LLM分布式推理终极方案——以GPU为中心的云原生架构

文章围绕 LLM 推理部署中 KV Cache 依赖带来的扩缩容困难、命中率波动、内存冗余和成本不透明等问题,提出以 GPU 为中心、通过 GD2FS 这类分布式文件系统承载 L2 缓存的无状态化推理架构。作者进一步用 Kubernetes 的弹性调度类比互联网后端演进,说明显式 KV Cache、零拷贝数据路径、预读分层缓存和可调副本策略如何提升资源利用率、降低主机内存占用,并给出了一组 RDMA/TCP 与多节点推理测试数据作为支撑。文章的主要边界在于:它更像一篇面向落地的架构提案与实践总结,部分性能结论需要结合具体硬件、负载和实现细节理解,不能直接泛化到所有推理场景。

推荐收录,因为它不是单纯讨论 LLM 推理概念,而是把缓存层级、调度弹性、状态管理和存储协议放到同一套架构框架里分析,具备较强的工程可迁移性。对做大规模推理平台、云原生基础设施和 GPU 资源调度的读者来说,这篇文章能提供有参考价值的设计思路、性能指标视角和权衡点。