datacored
本站致力于IT相关技术的分享
  文章分类
分布式架构 5 分布式系统 2 架构设计 4 平台工程 1 后端开发 1 DevOps 2 架构与设计 4 可观测性 2 全栈架构 1 DevSecOps 2 后端架构 2 云原生 2 数据工程 1
融合Django与JPA的时序数据可视化平台后端设计与实现 融合Django与JPA的时序数据可视化平台后端设计与实现
一个复杂的技术平台，其生命力往往取决于架构能否在相互冲突的需求间找到精妙的平衡点。我们需要一个面向用户的控制台，要求开发迭代快、对前端友好；同时，平台的核心数据模型又极其复杂，对事务一致性、类型安全和持久化性能有着严苛的要求。此外，系统还需
2023-10-27 架构设计
UI 组件库 Django JPA/Hibernate 时序
构建Swift原生容器、Service Worker与ClickHouse协同的离线分析前端架构 构建Swift原生容器、Service Worker与ClickHouse协同的离线分析前端架构
我们需要为一个内部数据平台构建一个高性能的分析前端。后端是ClickHouse集群，存储着数TB级的用户行为日志。业务需求非常明确：交互必须流畅，数据可视化响应迅速，并且，一个关键的、非功能性需求是——支持离线分析。这意味着用户在断网或网络
2023-10-27 架构设计
ClickHouse 架构设计 Service Workers Swift PWA
基于 eBPF 与 Flask 实现两阶段提交协议的无侵入式可观测性架构 基于 eBPF 与 Flask 实现两阶段提交协议的无侵入式可观测性架构
排查一次生产环境的分布式事务失败，根因可能散落在多个微服务的日志、不同的网络链路，甚至操作系统层面。当一个使用两阶段提交（2PC）协议的事务在 COMMIT 阶段卡住时，确定是哪个参与者未能正确响应 PREPARE 请求，或者网络分区导致了
2023-10-27 架构设计
eBPF Two-Phase Commit (2PC) Flask CircleCI 架构设计
构建从 GKE 上的 Spark 到浏览器 WASM 的大规模数据交互式分析架构 构建从 GKE 上的 Spark 到浏览器 WASM 的大规模数据交互式分析架构
我们需要为业务团队构建一个工具，允许他们对一个规模达数百GB的金融时间序列数据集进行高频次的交互式探索分析。用户的操作模式是：加载一个特定市场在某个时间窗口的完整数据集，然后通过调整多个复杂参数（例如波动率阈值、移动平均窗口、相关性因子），
2023-10-27 架构设计
CSS Modules Spring Framework WebAssembly (WASM) Apache Spark GCP GKE