归档 | zezeful

2024

03

21

团队的AI模型迭代对实时特征的需求越来越迫切，原有的T+1批量ETL流程已经成为瓶颈。我们需要一个能够接收实时用户行为事件，处理后写入特征存储，并能在毫秒级延迟内被线上模型查询的管道。这个任务落到了我们平台工程团队。痛点很明确：我们需要一个

2024-03-21 数据工程

Micronaut ClickHouse 服务网格 JPA AI

2023

11

20

直接将一个基于 Hugging Face Transformers 的 Python 服务暴露给公网，无异于将一个未经设防的军火库大门敞开。在真实的多租户生产环境中，这种做法会立刻引发一系列棘手的问题：API 滥用、凭证泄露、恶意提示注入，

2023-11-20 后端架构

Python SSR Security Monorepo Hugging Face Transformers

20

在一个典型的微服务体系中，我们常常面临一个两难的困境：负责核心业务逻辑的服务（例如订单服务、商品服务）为了保证事务的ACID特性，通常会选择关系型数据库（如PostgreSQL）并配合MyBatis这类成熟的ORM框架进行数据持久化。与此同

2023-11-20 分布式架构

微服务 CDC MyBatis Qdrant CQRS Debezium

10

27

摆在平台工程团队面前的挑战通常不是技术本身，而是技术组合带来的组织摩擦与效率损耗。开发团队需要快速、可靠地创建测试环境，而SRE团队则需要在移动状态下对关键基础设施变更进行监控与干预。任何一个环节的阻塞，都会直接转化为研发效能的下降。问题的

2023-10-27 软件工程与架构

Jetpack Compose Actix-web Micro-frontends 基础设施即代码 (IaC) 软件工程与架构

27

我们面临一个日益严峻的工程挑战：分析团队需要每日从 PB 级的数据仓库中，为数千个不同的业务切面生成定制化的分析图表。最初基于 Python 脚本和定时任务的解决方案，在报告数量超过一百个时便开始崩溃。串行执行耗时过长，手动并行化（例如，使

2023-10-27 数据工程

Clojure Ray Data Warehouse Matplotlib Architecture

27

处理实时机器学习特征的挑战在于其双重性：一方面需要能够支撑海量事件写入的吞吐能力，另一方面则要求在模型进行在线推理时，能够以个位数毫秒的延迟提供最新的特征向量。当团队的技术栈呈现异构化时——例如，核心API团队精通TypeScript与No

2023-10-27 架构与设计

TypeScript NumPy ScyllaDB 框架与库 gRPC 微服务