面向复杂数据审计需求的数据血缘构建方法.pdf

第４１卷第１期计算机应用研究Ｖｏｌ．４１Ｎｏ．１

２０２４年１月ＡｐｐｌｉｃａｔｉｏｎＲｅｓｅａｒｃｈｏｆＣｏｍｐｕｔｅｒｓＪａｎ．２０２４

面向复杂数据审计需求的数据血缘构建方法

１２２１３

潘晓华，金泳，高扬华，朱心洲，沈诗婧

（１．浙江大学软件学院，杭州３１００５８；２．浙江中烟工业有限责任公司信息中心，杭州３１０００７；３．浙江大学滨江

研究院国产信创技术研究中心，杭州３１００５３）

摘要：针对复杂数据审计需求，现有方法是通过查询分析数据库中每条执行语句信息，数据审计效率低下；目

前也有一些手段是使用数据血缘工具进行快速查找，但是这种方式需要侵入系统获取源码，容易造成数据泄露

或者被恶意窜改。针对这些问题，提出一种面向复杂数据审计需求的数据血缘构建方法，融合日志预处理、数据

关系解析、数据对齐等关键技术，通过解析系统运行日志信息以非侵入的方式实现数据血缘图谱的构建，并面向

烟草物流出入库环节形成数据审计工具。以烟草物流中１３７９６个批次货物在流转过程中所对应的１５５７２８条

事务日志为测试数据集，从完整性、构建成本、数据审计效率三个方面进行对比实验。结果表明，提出的方法能

够在１０ｓ内完成查询任务，占用内存为１．２３ＭＢ／百条，明显少于现有方法。相比现有方法，提出的方法可在数

据级粒度上进行完整准确的数据血缘构建，且使用基于该方法所构建的数据血缘进行数据审计能够大幅度提升

卷烟物流过程中的数据审计效率。

关键词：数据血缘；非侵入式；数据审计；卷烟物流；自动化作业

中图分类号：ＴＰ３１１．１３文献标志码：Ａ文章编号：１００１３６９５（２０２４）０１０１２００７６０７

ｄｏｉ：１０．１９７３４／ｊ．ｉｓｓｎ．１００１３６９５．２０２３．０５．０２１４

Ｄａｔａｌｉｎｅａｇｅｃｏｎｓｔｒｕｃｔｉｏｎｍｅｔｈｏｄｆｏｒｃｏｍｐｌｅｘｄａｔａａｕｄｉｔｒｅｑｕｉｒｅｍｅｎｔｓ

１２２１３

ＰａｎＸｉａｏｈｕａ，ＪｉｎＹｏｎｇ，ＧａｏＹａｎｇｈｕａ，ＺｈｕＸｉｎｚｈｏｕ，ＳｈｅｎＳｈｉｊｉｎｇ

（１．ＳｃｈｏｏｌｏｆＳｏｆｔｗａｒｅＴｅｃｈｎｏｌｏｇｙ，ＺｈｅｊｉａｎｇＵｎｉｖｅｒｓｉｔｙ，Ｈａｎｇｚｈｏｕ３１００５８，Ｃｈｉｎａ；２．ＩｎｆｏｒｍａｔｉｏｎＣｅｎｔｅｒ，ＣｈｉｎａＴｏｂａｃｃｏＺｈｅｊｉａｎｇＩｎｄｕｓｔｒｉａｌ

Ｃｏ．，Ｌｔｄ．，Ｈａｎｇｚｈｏｕ３１０００７，Ｃｈｉｎａ；３．ＩｎｎｏｖａｔｉｏｎＣｅｎｔｒｅｆｏｒＩｎｆｏｒｍａｔｉｏｎＳｃｉｅｎｃｅ，ＢｉｎｊｉａｎｇＩｎｓｔｉｔｕｔｅｏｆＺｈｅｊｉａｎｇＵｎｉｖｅｒｓｉｔｙ，Ｈａｎｇｚｈｏｕ

３１００５３，Ｃｈｉｎａ）

Ａｂｓｔｒａｃｔ：Ｆｏｒｃｏｍｐｌｅｘｄａｔａａｕｄｉｔｒｅｑｕｉｒｅｍｅｎｔｓ，ｅｘｉｓｔｉｎｇｍｅｔｈｏｄｓｒｅｌｙｏｎｑｕｅｒｙｉｎｇａｎｄａｎａｌｙｚｉｎｇｔｈｅｉｎｆｏｒｍａｔｉｏｎｏｆｅａｃｈｅｘｅ

ｃｕｔｉｏｎｓｔａｔｅｍｅｎｔｉｎｔｈｅｄａｔａｂａｓｅ，ｒｅｓｕｌｔｉｎｇｉｎｌｏｗｅｆｆｉｃｉｅｎｃｙｏｆｄａｔａａｕｄｉｔ．Ａｔｐｒｅｓｅｎｔ，ｔｈｅｒｅａｒｅａｌｓｏｓｏｍｅｍｅｔｈｏｄｓｔｈａｔｕｓｅｄａ

ｔａｌｉｎｅａｇｅｔｏｏｌｓｆｏｒｑｕｉｃｋｓｅａｒｃｈ，ｂｕｔｔｈｅｓｅｍｅｔｈｏｄｓｒｅｑｕｉｒｅｉｎｔｒｕｓｉｏｎｉｎｔｏｔｈｅｓｙｓｔｅｍｔｏｏｂｔａｉｎｓｏｕｒｃｅｃｏｄｅ，ｗｈｉｃｈｃａｎｅａｓｉｌｙ

ｃａｕｓｅｄａｔａｌｅａｋａｇｅｏｒｍａｌｉｃｉｏｕｓｔａｍｐｅｒｉｎｇ．Ｉｎｒｅｓｐｏｎｓｅｔｏｔｈｅｓｅｉｓｓｕｅｓ，ｔｈｉｓｐａｐｅｒｐｒｏｐｏｓｅ