vitalyinc
本站致力于IT相关技术的分享
利用 esbuild 和 Delta Lake Schema 构建 Python 微服务自动化脚手架 利用 esbuild 和 Delta Lake Schema 构建 Python 微服务自动化脚手架
在数据团队中，为每个新的数据模型或业务场景创建一个专用的 Python 微服务已是常态。但这个过程充满了重复性劳动：定义与 Delta Lake 表结构完全一致的 Pydantic 模型，编写 FastAPI 的 CRUD 路由，配置数据库
2023-10-27 平台工程
esbuild 微服务 Python Delta Lake 脚手架 IDP
构建基于 etcd 和 Raft 的自定义控制平面以优化 AWS EKS 上的开发者配置体验 构建基于 etcd 和 Raft 的自定义控制平面以优化 AWS EKS 上的开发者配置体验
在管理横跨数十个团队、数百个微服务的 AWS EKS 集群时，原始的 Kubernetes YAML 清单很快成为研发效能的瓶颈。开发者需要理解大量 Kubernetes 对象和字段，配置的编写、审查和维护成本极高，并且错误频发。我们的核心
2023-10-27 分布式系统
Raft 协议 Babel etcd AWS EKS 索引优化
采用 Saga 模式实现 Flask 后端与 Next.js 前端的分布式事务状态同步 采用 Saga 模式实现 Flask 后端与 Next.js 前端的分布式事务状态同步
在一个典型的微服务架构中，一个用户操作往往需要跨越多个独立的服务边界。例如，一个“创建项目”的请求可能需要依次调用用户服务来扣除积分，调用资源服务来分配计算资源，最后调用通知服务来发送确认邮件。如果采用简单的同步HTTP调用链，一旦中间某个
2023-10-27 分布式系统
分布式一致性 Flask Next.js 样式方案 框架
基于 SQL Server CDC 与 SSE 构建 Ant Design 实时数据网格的架构实践 基于 SQL Server CDC 与 SSE 构建 Ant Design 实时数据网格的架构实践
项目需求很明确：一个后台监控面板，需要实时、无延迟地反映核心业务表（dbo.Orders）的数据变更。用户操作员必须在数据写入数据库的瞬间，就能在前端表格上看到新增、修改或删除的记录，以便进行即时干预。最初的方案是前端轮询，但每秒一次的轮询
2023-10-27 全栈开发
Ant Design Server-Sent Events (SSE) SQL Server Valtio
在Kubernetes上使用C++构建一个管理Delta Lake高频写入的Operator 在Kubernetes上使用C++构建一个管理Delta Lake高频写入的Operator
我们面临一个棘手的场景：一个需要以每秒数百次到数千次的频率，将小批量（几KB到几MB）数据写入同一个Delta Lake表的系统。传统的Spark Streaming或Flink作业，由于其微批处理的调度延迟和JVM启动/预热的开销，对于这
2023-10-27 数据工程
Kubernetes Delta Lake C++ Operator S3
在 ASP.NET Core 中构建基于分布式锁的幂等性API中间件 在 ASP.NET Core 中构建基于分布式锁的幂等性API中间件
一个请求超时，客户端没有收到响应，于是它重试了。这个操作是创建一个订单。结果，数据库里出现了两条一模一样的订单，唯一的区别是ID和创建时间。这是真实项目中再常见不过的场景，尤其是在支付、交易这类核心模块，一次网络抖动就可能造成资损。解决这个
2023-10-27 后端架构
API 与架构 C# 框架与工具 ASP.NET Core Redis
3 / 5