yenzal
本站致力于IT相关技术的分享
Sanic与Ruby异构体系下构建高并发MongoDB事件管道的架构决策与实现 Sanic与Ruby异构体系下构建高并发MongoDB事件管道的架构决策与实现
一个看似矛盾的技术需求摆在了面前：我们需要一个能稳定处理每秒至少5万次并发写入的事件接收端点，同时，还需要一套逻辑复杂、迭代迅速的后台管理与数据分析API。前者对I/O性能和并发模型要求极为苛刻，后者则要求极高的开发效率和业务表达能力。团队
2023-10-27 架构与设计
Ruby MongoDB Sanic Python 微服务 异构系统
构建基于 Sentry 的 Next.js 到 Knative 全链路可观测性架构 构建基于 Sentry 的 Next.js 到 Knative 全链路可观测性架构
一个前端用户的点击操作，最终在某个缩容到零的 Knative 服务中触发了一个空指针异常。这两个看似遥远的事件，在传统的监控体系中是完全割裂的。前端监控系统可能会记录一次失败的 API 请求，状态码 500，但对失败的根本原因一无所知。后端
2023-10-27 可观测性
Sentry Knative React Next.js 分布式追踪
构建基于Go和XState的事件驱动型Scikit-learn模型训练编排器 构建基于Go和XState的事件驱动型Scikit-learn模型训练编排器
管理一个机器学习模型的训练生命周期，本质上是一个复杂的状态管理问题。一个典型的训练任务可能包含数据校验、预处理、特征工程、模型训练、评估、版本化等多个阶段，其中任何一步都可能成功、失败或长时间运行。在真实项目中，我们常常面对的挑战是：如何构
2023-10-27 架构与设计
Go XState Scikit-learn 事件驱动架构 MLOps
使用 Tekton 与 gRPC 实现一个管理 Flink 分布式事务的 Kubernetes Operator 使用 Tekton 与 gRPC 实现一个管理 Flink 分布式事务的 Kubernetes Operator
最近团队遇到了一个棘手的状态一致性问题。我们的流处理平台核心是 Apache Flink，它消费实时数据，处理后需要同时写入到两个异构系统中：一个用于在线查询的 PostgreSQL 数据库，另一个是用于全文检索的 Elasticsearc
2023-10-27 分布式系统
Two-Phase Commit (2PC) Tekton Apache Flink NATS gRPC
实现一个跨区域高可用的 Weaviate 架构在 DigitalOcean 上的 CAP 约束实践 实现一个跨区域高可用的 Weaviate 架构在 DigitalOcean 上的 CAP 约束实践
部署一个向量数据库集群的挑战，并不仅仅是启动几个实例。真正的难题在于，当业务要求服务必须跨越多个地理区域、容忍单点故障、并为全球用户提供低延迟访问时，我们必须直面分布式系统最核心的权衡：CAP 定理。我们的目标是为一套AI驱动的个性化推荐系
2023-10-27 分布式架构
Weaviate CAP Theorem Terraform DigitalOcean 分布式数据库
构建基于 ISR 保证消息必达的云原生 Server-Sent Events 推送网关 构建基于 ISR 保证消息必达的云原生 Server-Sent Events 推送网关
在设计需要服务端主动推送数据的系统时，我们面临一个核心的健壮性问题：当处理SSE（Server-Sent Events）连接的后端服务实例发生故障或重启时，如何确保在这短暂中断期间产生的消息不会永久丢失？一个简单的、在服务内存中直接处理SS
2023-10-27 分布式架构
Server-Sent Events (SSE) API Gateway SkyWalking ISR Terraform
5 / 5