归档: 2023 | drvively

2023

11

21

一、定义问题：不可能的延迟三角项目需求明确而严苛：为一套在线交易欺诈检测系统构建后端引擎。核心指标是P99延迟必须控制在5毫秒以内，从接收到交易事件到输出欺诈评分。数据源是每秒数万笔交易的原始数据流，同时需要关联用户过去1秒、1分钟、1小

2023-11-21 数据工程

C++ ScyllaDB Data Lake Scikit-learn WebAuthn

15

我们面临一个日益棘手的诊断困境。用户报告的前端卡顿或操作失败，其根因分析链路被三个相互割裂的系统所撕裂：Grafana展示着来自InfluxDB的RUM（真实用户监控）指标，Kibana呈现着ELK Stack收集的应用日志，而Zipkin

2023-11-15 可观测性

SwiftUI Zustand InfluxDB ELK Stack Zipkin

15

我们面临一个具体的工程挑战：一个核心业务模块由 Flutter 构建，已在移动端稳定运行多年，积累了复杂的业务逻辑和UI组件。现在需要将这个模块无缝集成到我们现有的、基于 Web Components 和 UnoCSS 的主干应用中，形成一

2023-11-15 架构设计

Flutter UnoCSS Vitest SQL 微前端

10

27

在我们的多语言微服务体系中，一个反复出现的痛点是服务间的接口契约管理。核心服务使用 Go 编写，通过 gRPC 提供高性能接口，而多个业务前端和 BFF (Backend for Frontend) 层则由 Ruby on Rails 团队

2023-10-27 DevOps

Kubernetes gRPC-Go GitHub Actions Ruby

27

我们需要一个机制，将线上 PostgreSQL 数据库的变更数据（CDC）近乎实时地同步到数据湖中，用于后续的分析和模型训练。传统的 T+1 式 ETL 批处理延迟太高，无法满足业务对数据新鲜度的要求。而引入 Flink 或 Spark S

2023-10-27 数据工程

Apache Hudi OpenFaaS Apache Iceberg CDC Serverless 数据湖

27

一个看似合理的需求摆在面前：用户希望在一个内部数据平台上，通过一个简洁的前端界面，对存储在数据湖（基于 Apache Iceberg）中的数十亿条记录进行即席查询、聚合与分析，并期望获得类似数据库应用的交互体验。这里的核心矛盾显而易见：前端

2023-10-27 架构设计

Apache Iceberg Express.js RESTful API UI 组件库