myzypo
本站致力于IT相关技术的分享
基于 OpenTelemetry 实现对大规模 Sass/SCSS 项目构建耗时的分布式追踪与分析 基于 OpenTelemetry 实现对大规模 Sass/SCSS 项目构建耗时的分布式追踪与分析
我们团队维护着一个庞大的前端 Monorepo，其中包含了数千个 SCSS 文件，服务于几十个子应用。随着时间的推移，CI/CD 流水线中的 SCSS 构建步骤从最初的十几秒，逐渐膨胀到了令人难以忍受的 5-8 分钟。传统的 Node.js
2023-10-27 可观测性
OpenTelemetry ELK Stack Sass/SCSS
构建连接 Next.js 与 Apache Hudi 的 Feature Store 网关服务 构建连接 Next.js 与 Apache Hudi 的 Feature Store 网关服务
团队的机器学习平台最近遇到了一个典型的“数据孤岛”问题。数据科学家们使用 Spark 在数据湖上构建了一套基于 Apache Hudi 的 Feature Store，工作流顺畅，模型迭代效率很高。Hudi 的 Copy-on-Write
2023-10-27 数据工程
Node.js Next.js Apache Hudi Feature Store Trino
利用 Envoy Proxy 为 Kotlin Multiplatform 与 tRPC 构建统一的零侵入可观测性架构 利用 Envoy Proxy 为 Kotlin Multiplatform 与 tRPC 构建统一的零侵入可观测性架构
在采用 Kotlin Multiplatform 构建移动端，并以后端 tRPC 微服务集群提供类型安全接口的架构中，一个核心的非功能性需求浮出水面：如何实现一套从客户端到后端深层服务的、统一且完整的分布式追踪体系。业务代码的快速迭代要求我
2023-10-27 分布式架构
服务网格 可观测性 Envoy Proxy Kotlin Multiplatform tRPC
构建PB级可观测性数据后端 TiDB与ClickHouse的混合架构选型与实现 构建PB级可观测性数据后端 TiDB与ClickHouse的混合架构选型与实现
我们的起点是一个棘手的工程问题：当可观测性数据——涵盖日志、追踪和指标——日增量达到TB级别，总存储迈向PB规模时，应该采用何种后端架构？单一的技术栈，无论是纯OLAP引擎还是HTAP数据库，都开始暴露出明显的短板。这不仅仅是存储问题，更是
2023-10-27 后端架构
可观测性 TiDB ClickHouse 后端 数据工程
构建 MLOps 实时向量特征存储的分布式元数据一致性方案 构建 MLOps 实时向量特征存储的分布式元数据一致性方案
当 MLOps 平台需要为上百个并发模型训练任务提供实时向量特征时，真正的瓶颈往往并非数据平面的吞吐量，而是控制平面的元数据一致性。一个特征的定义、版本、源头数据湖的快照信息、以及其在线服务的状态，这些元数据是整个系统的“大脑”。在分布式环
2023-10-27 分布式系统
MLOps 分布式一致性 向量 Data Lake CSS Modules
基于TDD构建由Haskell与Flask驱动的CockroachDB分布式事务内核 基于TDD构建由Haskell与Flask驱动的CockroachDB分布式事务内核
一个项目的核心账本模块，最初用Python实现，在并发量上升后开始频繁出现数据不一致的幽灵事件。尽管使用了数据库的SELECT ... FOR UPDATE行锁，但在复杂的业务逻辑分支和重试机制下，死锁和更新丢失问题依然层出不穷。问题的根源
2023-10-27 分布式系统
CockroachDB TDD Haskell Flask
4 / 5