keytophub
本站致力于IT相关技术的分享
  文章分类
后端架构 4 云原生与DevOps 1 架构设计 1 架构与设计 4 DevSecOps 1 分布式架构 3 数据工程 3 云原生 1 前端工程化 1 客户端架构 1 DevOps 4 分布式系统 2 可观测性 2 大前端 1
融合 Flink Ktor 与 Snowflake 构建端到端实时业务异常可观测性数据管道 融合 Flink Ktor 与 Snowflake 构建端到端实时业务异常可观测性数据管道
定义问题：超越阈值的实时监控业务指标流，例如用户订单量、支付成功率、API调用延迟，是系统的生命线。传统的监控方案往往依赖于静态阈值，比如“当订单量低于100/分钟时告警”。这种方式在应对突发流量或周期性波动时显得非常脆弱。一个真实的技术挑
2023-10-27 数据工程
Apache Flink 可观测性 Ktor Snowflake Chakra UI 实时计算
构建支持流批一体与即时图计算的混合特征存储架构决策与实现 构建支持流批一体与即时图计算的混合特征存储架构决策与实现
在一个高并发的风控或推荐场景下，对特征计算和存储系统的要求是极为苛刻的。系统必须能以毫秒级延迟响应在线服务的请求，同时处理来自实时事件流的瞬时特征、来自批处理作业的深度历史特征，以及在特定请求下才能触发的复杂关系网络特征。任何单一的架构范式
2023-10-27 数据工程
Apache Flink Hadoop NoSQL Celery ScyllaDB
在Hadoop生态中利用Scala复用MyBatis作为声明式ETL引擎的架构实践 在Hadoop生态中利用Scala复用MyBatis作为声明式ETL引擎的架构实践
我们面临一个典型的技术债务与现代化改造的冲突场景。数据平台团队已经成功在Hadoop上构建了新的数据湖，技术栈统一为Scala和Spark。然而，业务的核心价值——数百个经过多年迭代、复杂且高度优化的SQL查询，被牢牢地锁在旧有Java单体
2023-10-27 数据工程
Scala MyBatis Hadoop ETL 架构设计