实时数据挖掘
流批一体的特征计算,窗口聚合支持 1 分钟到 30 天,异常检测召回率 0.91。
流处理 · 特征工程1.8亿
日处理事件量
峰值写入 62 万条/秒,端到端延迟 < 5s
99.95%
指标口径一致率
基于统一指标中台,双周自动回归校验
-38%
看板首屏等待
列裁剪 + 预聚合后,从 3.2s 降至 2.0s
4.7分
分析师体验评分
基于 5 分制可用性问卷,样本 216 人
面向数据产品与体验设计同学,按顺序执行即可从 0 到可用。每条都给出可直接抄的参数与阈值,避免「看起来很美但落不了地」。
把「活跃用户、留存、转化」写成唯一口径文档,字段命名统一为 domain_entity_metric_window。所有看板与算法必须引用同一口径表,禁止在 SQL 中重复定义。
每个事件定义 3 类属性:身份(user_id/device_id)、上下文(页面、来源)、业务参数。属性总量控制在 25 个以内,多余字段走扩展 JSON,避免宽表膨胀。
目标:埋点验收通过率 ≥ 95%,脏数据占比 < 0.5%明细层保留最细粒度,汇总层按「实体 × 时间窗」预聚合;ADS 只暴露查询友好的宽表。单表分区不超过 3000 个,单分区文件控制在 128–256MB。
目标:查询 P95 < 2s,存储成本月降 15%上线前依次通过:① 特征穿越检查(时间窗严格不重叠);② 离线 / 在线一致性比对(AUC 差异 < 0.02);③ 小流量灰度 5% 观察 72 小时,指标劣化即自动回滚。
目标:模型上线事故 0 起,回滚耗时 < 3 分钟① 一屏一个主任务,主色仅用于激活态与关键数字;② 所有分隔使用 1px 细线,禁止重投影与描边叠加;③ 图例不超过 5 个色相,超出改用直接标注。留白按 8pt 节奏推进。
目标:首屏信息理解时间 < 8s,误点率 < 2%每双周做一次任务完成率测试(样本 ≥ 30 人),记录任务耗时、求助次数、SUS 得分;把问题按「数据缺失 / 交互阻塞 / 认知负担」归类,各配一名责任人限时整改。
目标:任务完成率 ≥ 90%,SUS ≥ 80 分以「人怎么用数据」为起点反向设计链路:统一语义层 + 指标服务 + 可视化组件库,让线条艺术成为信息层级的表达方式,而非装饰。
流批一体的特征计算,窗口聚合支持 1 分钟到 30 天,异常检测召回率 0.91。
流处理 · 特征工程从 1200+ 原始字段收敛为 180 个标准指标,血缘可追溯至最底层埋点事件。
语义层 · 血缘提供 32 个图表组件与 1px 线条规范,图表加载体积压缩 46%,首屏更快。
图表库 · 设计令牌用可用性测试验证每个数据页面,任务完成率与 SUS 双指标纳入上线门槛。
用户体验 · 度量
线条艺术在此不是装饰:一条 1px 引线从上位指标指向下位维度,读者可沿着视觉路径完成一次完整的因果推演。
工作坊梳理 3 类核心决策问题,输出指标口径卡与验收标准,确认数据源可用性。
完成 DWD/DWS 分层与 20–30 个关键特征,跑通离线评估,AUC 与基线对比留档。
按极简线条规范出图,做一轮 5 人可用性走查,修正信息层级与交互阻塞点。
5% 流量灰度 72 小时,观察延迟、成本与业务指标;输出复盘报告与下一轮迭代清单。