datakfy
本站致力于IT相关技术的分享
构建服务于实时推荐的向量特征存储与检索系统 构建服务于实时推荐的向量特征存储与检索系统
在构建现代推荐系统时，一个核心挑战在于如何弥合模型离线训练与在线服务之间的鸿沟，尤其是在处理高维向量（Embeddings）特征时。训练-服务偏斜（Training-Serving Skew）往往源于两套独立的数据处理管道：一套用Pytho
2023-10-27 数据工程与存储
Pinecone Kotlin Solid.js Fastify Feature Store
基于领域事件与AWS SQS构建Django到C#的最终一致性数据管道 基于领域事件与AWS SQS构建Django到C#的最终一致性数据管道
我们面临一个典型的异构系统集成挑战：一个核心业务系统由 Django 构建，负责商品数据的全生命周期管理；而一个新的、高性能的搜索与推荐服务则决定采用 C# 和 .NET 平台，以利用其类型安全和计算性能优势。问题在于，如何以一种可靠、解耦
2023-10-27 分布式架构
C# AWS SQS Domain-Driven Design (DDD) Django Meilisearch
构建基于SQL Server CDC与Java WebSocket的静态站点实时数据层 构建基于SQL Server CDC与Java WebSocket的静态站点实时数据层
我们面临一个棘手的技术约束。前端团队选定Gatsby作为内容交付平台，目标是利用其预构建（Pre-building）能力将页面生成纯静态HTML/CSS/JS，部署至CDN以获得极致的加载性能和全球低延迟。然而，业务方要求一个核心的仪表盘页
2023-10-27 架构与设计
Kafka Java Gatsby SQL Server WebSockets Debezium
基于 TDD 与 Babel 运行时转译实现 OAuth 2.0 插件化认证核心 基于 TDD 与 Babel 运行时转译实现 OAuth 2.0 插件化认证核心
维护一个支持多种认证方式的 OAuth 2.0 服务，其复杂性往往会随着业务扩展而失控。最初可能只需要支持标准的密码模式，但很快，产品需求就会引入 GitHub、Google 登录，甚至对接遗留系统的单点登录。这通常导致核心代码库中出现臃肿
2023-10-27 后端架构
架构设计 Node.js OAuth 2.0 TDD Babel
实现MyBatis动态SQL性能的可观测性 从Oracle到Prometheus再到Storybook诊断面板 实现MyBatis动态SQL性能的可观测性 从Oracle到Prometheus再到Storybook诊断面板
一个陈旧但核心的报表模块，响应时间从几百毫秒悄无声息地攀升到了十几秒。应用性能监控（APM）系统只给出了一个模糊的告警：com.ourcompany.mapper.ReportMapper.queryComplexReport方法耗时过长。
2023-10-27 可观测性
Oracle MyBatis Prometheus Storybook
在 Fastify 事件驱动架构中实现端到端处理时延的 Prometheus 监控 在 Fastify 事件驱动架构中实现端到端处理时延的 Prometheus 监控
我们团队的事件驱动系统上线后，基础的 CPU 和内存监控图表一片绿色，标准的 HTTP 网关入口请求时延 P99 也稳定在 50ms 以内。然而，一种不安感始终萦绕不去。当产品经理询问“一个订单创建事件，从触发到最终通知用户，整个流程需要多
2023-10-27 可观测性
Node.js Fastify Prometheus 事件驱动架构 (EDA) SLI
4 / 5