作品笔记 · Goh Kun Ming
Driver Safety Analytics Platform
数据 · 公开项目
2025年10月 – 2025年12月
项目概述
驾驶安全数据流水线，结合验证、特征工程、维度建模和分析报告。
一个驾驶安全数据工程管道，将驾驶员、传感器和安全标签记录从 MySQL 暂存层，经 Python 与 PySpark 处理后写入星型模式数据仓库。它为探索性分析准备数据和 Power BI 文件，并提供安全的命令行编排与离线检查，不宣称生产规模或安全影响。
作品详情
- 构建驾驶员和行程传感器维度，并与订单级安全标签关联。
- 应用模式标准化、去重、缺失值处理和基于规则的验证。
- 提取加速度幅值、加加速度、行程汇总和行为指标。
- 实现 IQR 与 PCA 重构诊断，识别异常传感器记录。
- 加入环境验证、模拟运行和需主动启用的实时数据库访问。
- 保留笔记本、SQL、Power BI 文件，以及架构、隐私和运维文档。