归档: 2023/10 | wizeboxed

2023

10

27

我们负责维护的WAF集群每天要处理近千亿次的请求，随之产生的安全日志体量是惊人的。最初，我们使用一套成熟的ELK Stack来收集和分析这些日志，在业务初期这套方案运行良好。但随着流量增长，尤其是攻击的多样化导致日志字段的基数（Cardin

2023-10-27 数据工程

WAF HBase 可观测性 Go 大数据

27

一台普通的云服务器，单核CPU，目标是实现一个每秒能够稳定处理数万次日志写入请求的HTTP服务。请求体是结构化的JSON，需要持久化到关系型数据库中以便后续按时间、级别和特定字段进行查询。常规的技术栈，例如Node.js + ORM + P

2023-10-27 后端开发

Zig SQLite 索引优化关系型 (SQL) RESTful API

27

在一个复杂的业务流程中，例如创建一个包含多重资源配置的大型营销活动，往往涉及对多个微服务的调用：活动服务、优惠券服务、用户通知服务、风控服务。这些操作必须作为一个原子单元，要么全部成功，要么全部回滚。传统的两阶段提交（2PC）因其同步阻塞和

2023-10-27 软件工程与架构

索引优化 Saga Pattern Zookeeper 软件工程与架构 Vue.js

27

一个看似简单的操作——用户在基于 Ant Design 的后台管理界面中创建一个新实体，点击“确定”后，表单关闭，数据列表自动刷新，但新创建的数据却迟迟没有出现。几秒钟后，再次手动刷新，数据才终于显示出来。这个场景对于任何一个处理过高并发读

2023-10-27 架构设计

CQRS Ant Design 读写分离服务网格

27

数据库安全审计，一个老生常谈却又永远棘手的问题。传统的方案无非两种：在 PostgreSQL 内部开启日志审计，或者在应用和数据库之间架设一个代理。前者对数据库本身性能消耗巨大，在高并发下 log_statement = 'all&

2023-10-27 云原生

可观测性 Zig PostgreSQL Cilium eBPF

27

一个业务系统发展到一定阶段，几乎总会面临数据读取模式的冲突。用户前端需要亚秒级的、支持模糊匹配与拼写纠错的全文检索；而运营和数据分析团队则需要对数月甚至数年的数据进行复杂的聚合、分组和统计查询，以生成报表。这两种需求，在底层技术实现上是根本

2023-10-27 数据工程

ClickHouse PHP Meilisearch Docker CDC Debezium