【精编】行业培训-数据质量体系
2017 04 烟草行业 卷烟工业企业 设备管理信息系统项目数据统计分析及数据质量保障体系介绍 培训交流目标 支撑行业设备管理工作的唯一一套法定的权威的统计数据 举行业之力来源行业用于行业 专用于设备管理业务 行业唯一 企业唯一 有法可依 行业发布 随着系统应用的逐步开展 数据上报不及时 不完整 不准确的问题逐步显露 制定完善的数据校验规则与检查办法显得日益迫切 1000 1000 为了更科学 全面 便捷的分析 查找 评估和解决系统各环节的数据质量问题 保证数据上报的及时性 准确性和完整性 需要构建一套相对系统 高效 完备的数据质量保障体系 加强数据质量管理 提高系统统计分析的准确性 是充分发挥系统功能与作用的重要辅助支撑 数据质量问题是什么 数据质量的衡量标准是什么 解决数据质量问题的切入点和抓手有哪些 如何保障数据上报过程中 尽可能不出现数据质量问题 如何发现数据质量问题 如何保证数据质量问题能够被处理 是什么 解决数据质量问题为什么这么难 为什么 怎么办 台账 设备名称 型号 能力等属性是否准确 运行 8张运行报表数据上报是否准确 台账 设备数量 设备信息属性等是否完整 运行 是否漏报部分设备 是否漏报指标 月报 次月15日中午12点之前上报至总公司 年报 次年3月1日中午12点之前上报至总公司 数据质量问题的评判依据 如何评判数据质量情况 及时性 完整性 准确性 数据质量 真实 正确 规范 属性 指标 数量 补报 当月不报 失真 失误 数据上报的及时性判定 数据质量问题的评判依据 及时性 月报 次月15日中午12点之前上报至总公司 年报 次年3月1日中午12点之前上报至总公司 数据上报的完整性判定 横向比较 数据质量问题的评判依据 完整性 1 系统内部数据间比较 2 与外部数据源比较 台账数据 1 与实物是否符合 3 与其他信息系统中台账数据 固定资产数据是否一致 现场核查 4 与购置合同数据是否一致 与调拨 报废等审批数据是否一致 运行数据 1 与台账比 是否所有设备都上报 2 报表间数据比 有消耗为何没产量 有产量为何没运行时间 2 该有的信息是否为空 3 与企业其他系统数据是否一致 现场核查 4 与行业其他系统的数据是否一致 存在的差异是否处于合理范围 5 数据准确性判定 数据质量问题的评判依据 准确性 烟草行业 卷烟工业企业 设备管理信息系统数据校验规则库 烟草行业 卷烟工业企业 设备管理信息系统数据校验规则库 解决数据质量问题为什么这么难 为什么 持续 A 变化 B 点多 C 量大 D 导致数据质量问题产生的原因多样 业务变化 人员调整 工作失误等都有可能导致数据质量问题 这些问题具有随机性和偶发性 不会随时间发展而消失 因此数据质量工作也需要严密的制度 持续的关注和高度的责任心 数据质量问题的变化性较强 差异性大 不同时期体现出的数据质量问题不一样 不同企业的数据质量问题也不同 同一数据在单个企业的不同时期 机台和不同企业之间的差别也很大 系统的来源分散 涉及面广 主要涉及到卷烟厂 中烟 总公司多个层级 企业内部涉及到车间 设备管理 生产管理 质量工艺 财务 备件等不同部门 管理环节较多 出现数据质量问题后 问题的排查 定位与沟通解决的难度较大 设备采集粒度到天 班次 机台 涵盖了生产 设备 质量 财务 消耗等多方面数据 采集量较大 数据出现问题概率高 问题排查工作量大 相互之间的逻辑校验规则也很多 解决数据质量问题的切入点和抓手有哪些 如何发现数据质量问题 如何保证数据质量问题能够被处理 怎么办 如何保障数据上报过程中 尽可能不出现数据质量问题 数据质量 技术 增值 形成三级组织1 卷烟厂2 中烟3 总公司 制度 组织 解决数据质量问题的切入点和抓手有哪些 从业务出发 在业务各环节各节点均设置具体数据质量保障方案 环环相扣 最终形成 一条主线 和 一个闭环 相结合的数据质量保障体系 实现数据质量问题在事前 事中 事后的全覆盖 一条主线 指数据从卷烟厂填报到总公司审核的这条数据生成主线 涉及到这条数据流主线的每一个环节 均环环相扣 层层把关 每个环节都有对应的质量手段以确保尽可能不出现数据质量问题 一个闭环 对数据质量问题要有充分的发现与处理机制 并从问题检查发现 问题反馈 问题核实整改 问题跟踪等各方面着手 构建一个闭环的问题跟踪处理流程 以确保数据质量问题得到有效整改 一条主线 卷烟厂自查 中烟审查 总公司核查 卷烟厂作为数据上报工作的起点 是数据流产生的源头 对数据质量起着至关重要的作用 规范解读 数据接口 数据填报 数据校验 数据分析 卷烟厂自查 怎么做 从根本上降低数据上报工作量 提升数据上报质量 按照企业生产经营的实际情况报送真实数据 数据上报时点击 数据校验 按钮 对填报数据进行校验检查 数据上报完成后 刷新统计数据 查看所填数据的统计结果 数据校验 卷烟厂自查 怎么做 数据上报时点击 数据校验 按钮 对填报数据进行校验检查 卷烟厂自查 怎么做 数据分析 数据上报完成后 刷新统计数据 查看所填数据的统计结果 异常数据红色字体标注 中烟作为数据上报工作的主要负责者 对数据质量起着重要的把关作用 规范解读 数据接口 数据审核 数据校验 数据分析 中烟审查 怎么做 从根本上降低数据上报工作量 提升数据上报质量 对数据质量严格把关 确保上报数据准确可靠 数据上报时点击 校验 按钮 对审核数据的准确性进行校验检查 刷新统计数据 查看中烟数据的统计结果 规则库完善 数据核查 数据报告 总公司核查 怎么做 总公司作为数据使用者 行业数据发布者 对数据质量进行最终核查 1 持续丰富并完善数据校验规则库 2 不断完善数据质量管理平台的功能 1 对各单位上报数据进行逻辑性检查 2 不定期对各单位数据进行现场核实 1 对各单位每月上报数据发布月度检查报告 2 对各单位数据上报情况进行行业通报 半年 季度 总公司核查 逻辑检查 上报及时性检查 使用数据质量管理平台的上报情况统计 重报情况统计 对于未及时上报的报表和重报后未及时上报的报表检查出来 及时通过短信平台等方式提醒相关企业进行报表补报和重报工作 总公司核查 逻辑检查 数据准确性检查 依据 数据校验规则库 进行检查 对上报数据偏高 偏低 为负等异常或逻辑性错误体现在 质量检查报告 中 并及时将质量检查报告发放到各中烟 同时借助系统外数据 检查数据的准确性 如设备原值变化与大项修维改系统的对比 产成品数量与消耗数据的比对等 总公司核查 逻辑检查 数据完整性检查 总公司通过系统外能获得的资料作为数据完整性检查对照数据源 如台账报废 调拨等状态检查可结合国家局相关文件进行系统内变更情况检查 新购设备可结合新机购置计划相关文件进行系统内新增台账检查等 总公司核查 抽查和巡查 总公司将根据 信息系统运行管理办法 及各级企业数据上报情况 不定期进行现场抽查或组织行业互查 巡查 总公司抽查 巡查前 撰写工作计划 确定抽查 巡查企业 抽查 巡查方式 参与人员 检查项 检查时间 总公司抽查 巡查后 形成 数据质量抽查 巡查报告 检查项将会依据企业实际上报情况来进行设置 总公司核查 抽查和巡查 检查项 1 口径核实 2 设备台账检查 3 卷烟产成品数量 残次品数量检查 4 设备运行时间检查 5 卷接机组SD值检查 6 原料消耗 制丝产量检查 7 辅料消耗检查 8 成本 费用数据检查 总公司核查 抽查和巡查 检查项 1 口径核实 总公司核查 抽查和巡查 检查项 2 设备台账检查 总公司核查 抽查和巡查 检查项 3 卷烟产成品数量 残次品数量检查 总公司核查 抽查和巡查 检查项 4 设备运行时间检查 总公司核查 抽查和巡查 检查项 5 卷接机组SD值检查 总公司核查 抽查和巡查 检查项 6 原料消耗 制丝产量检查 总公司核查 抽查和巡查 检查项 7 辅料消耗检查 企业自查重点 自查项目 1 核实企业设备系统中卷接 包装机组在建 在用设备组数 设备型号 设备状态 额定能力 改造后能力 制造商等属性与行业设备管理系统是否一致 2 核实卷接包车间现场卷接 包装机组设备组数 设备型号 设备状态 额定能力 改造后能力 制造商等属性与行业设备管理系统是否一致 3 核实企业系统中 MES ERP等 的各卷接机组的产成品规格 数量 运行时间 原辅材料消耗 质量等数据与行业设备系统上报数据是否一致 一条主线 卷烟厂自查 中烟审查 总公司核查 一个闭环 总公司 卷烟厂 中烟 填报 接收数据 数据审核 上报 数据检查 上报 接收数据 逻辑校验 生成数据质量报告 报告下发 问题分析工作安排 数据核实 反馈整合 结果反馈 反馈接收整理 问题整改 整改跟踪 重报 现场核查 备案 企业自查 总公司核查 跟踪处理流程 检查 基于规则库 数据质量管理平台 自动校验各单位上报数据的准确性 逻辑校验 实际小于理论 属性值为空 运行效率偏低 高 辅料耗损率为负 月报与明细不符 1 跟踪处理流程 报告 该报告通过对各单位数据上报的及时性 完整性和准确性进行检查 将可能存在问题的数据进行提醒标注 也可能实际情况就是如此 并初步分析问题原因 以帮助企业进行数据问题排查 数据质量检查报告 2 跟踪处理流程 核实 中烟需组织各卷烟厂对项目办发布报告中各项问题进行核实 异常值 分析计算逻辑及原始指标 发现或定性问题 月度报告 是问题 报项目办并备案 后续报告中不再体现 不是问题 企业修正 总公司跟踪进度 3 跟踪处理流程 修正 发现数据问题后 1 业务问题 根据业务实际 修正业务系统中对应数据 如补录业务单据 2 非业务问题 报送工作失误 修正失误数据 并注明修正原因 4 跟踪处理流程 上报 重新上报 向项目办申请重报数据 由项目办或项目组 经项目办授权 下发重报指令 卷烟厂重新上报数据 系统自动记录重报痕迹 5 举例说明 1 检查 报告 核实过程 检查 产能贡献率不大于100 大于则提示异常 1 反馈 在质量报告中反映XX单位的卷接设备产能贡献率偏高 2 跟踪处理流程 举例 核实 统计指标 检查产成品数量 额定能力是否正确 3 分析异常原因 正确 产能不足 反馈 企业无需调整 如实将情况体现在质量报告的核实结果中 反馈总公司项目办总公司记录 作为后续检查的参考 4 举例说明 1 检查 报告 核实过程 跟踪处理流程 举例 举例说明 2 检查 报告 核实 修正 上报全过程 检查 运行效率大于0 否则提示异常 1 发现 XX单位的卷接设备的运行效率为0 2 跟踪处理流程 举例2 举例说明 2 检查 报告 核实 修正 上报全过程 跟踪处理流程 举例2 核实 统计指标 可到机台 检查 产成品数量 生产天数额定产能 是否正确 3 月报数据 产成品月报 卷接机组产成品数量 卷接机组产成品数量漏报 修正 上报 企业整改 联系总公司 打回 产成品月报 报表进行重报 总公司记录 并跟踪企业整改进度 企业整改完成后 总公司重新检查数据质量 4 不断加大技术 组织 制度三方面的力度 不断提升数据质量意识 不断深化系统数据的应用 不断完善及时性 准确性 全面性这三方面的规则 谢谢