数据质量与月光宝盒

标签:CIO管理咨询数据质量月光宝盒

访客:22135  发表于:2012-12-04 13:48:47

周星驰的电影《大话西游》中,至尊宝从一个小混混成了盖世英雄,虽然搞不懂是先有至尊宝后有孙悟空还是先有孙悟空后有至尊宝,但是可以确定,如果没有月光宝盒,至尊宝就永远是个小混混,他就不会在关键时刻遇到紫霞仙子,帮助他蜕变成孙悟空。

当然在看这部影片的时候,不能将科学常识掺杂进去,但你必须得假设世界上一定存在月光宝盒能够让时间倒流,这样电影中的一切才会合乎情理,而如果观众不做这个假设,那剧中的一切都是无稽之谈。

“数据质量其实意味着。。。”

培养有关数据质量观念市场是一件很必要的事情,它应该允许存在多样化的观点。在这个市场里,每个人都能自由地分享Idea,而不用担心偏见;每个人都能听到别人的观点,并允许每个人有讨论和质疑的机会。

不过对于数据质量行业,我有块心病----每当我与分析员、销售、顾问和其他相关从业人员讨论数据质量带来的挑战时,他们总会提出这样的要求:你的数据质量管理中必须要有像月光宝盒那样的利器。换句话说,我必须要像看《大话西游》时,假设并告诉他们不存在的月光宝盒存在,这样他们才会觉得我所提供的数据质量问题解决方案看起来更加合理些。

有时候,用户一而再地告诉我:“我要一个只有清洗数据功能的软件或者只有预防功能的方案。”就好像我们根本不知道用户的需求似的。用户把从专家那儿获得的算法(如数据模式,业务流程管理,数据质量管理,灵活软件开发,数据管理等等)当作月光宝盒来看。但是,即便我给了他们这些东西,也不能保证在其他数据出问题之前或者业务运行之前,能够让每个用户学会用正确的方式做事让所有数据总是在第一次输入时就是正确的”。有这样的想法不啻于天方夜谭。

《大话西游》中至尊宝的蜕变从一个月光宝盒开始,这让我想:“也许数据质量其实意味着……

数据质量真的有点像月光宝盒的假设,接受假设之后就能够单独地正确描述数据质量概念的应用,但是这种需要刻意且自愿让自己处于迷幻状态的做法,却把多层面的复杂数据质量想的过于简单了。

月光宝盒般的设想确实能成就很多让人高兴的故事,也能撰写出有效的推销语言。但若是为了便于讲解自己的解决方案,或者为了让客户相信自己的方法一定能够解决其数据质量问题,而将数据质量的复杂性说的过于简单,那这就无异于在处理数据质量问题中,相信至尊宝会变成孙悟空出现来拯救世界一样。

数据质量与“波若波罗密”

《大话西游》中波若波罗密咒语的作用,是故事中常见的情节与手法,当问题看起来陷入无解境地的时候,通常,会忽然冒出了一个意外,一些大家没有料到过的事件、角色、超能力或者物体强行介入,从而给整件事情带来了转机。

数据质量软件和服务的市场中也经常用到这种技术手法。当劣质数据引起重大问题的时候,我们可能通过新事件(例如建立数据管理委员会)、新角色(例如聘用专家顾问)、新能力(例如将数据质量衡量标准与商业洞察联系起来)或者是新物体(例如采购新的数据质量工具)来解决该问题。

我相信来自不同学科的技术和算法和很多核心原则(例如交流与合作,还有改变管理模式)一样都是数据质量方程中重要的元素,但是我不相信某个特殊的变量可以在数据质量理论中像月光宝盒那样独立存在。

数据质量问题不是特殊事件

数据质量并不仅仅关乎技术,也不仅仅关乎算法。数据清洗或者缺陷预防都不是数据质量的全部。数据质量并不是什么特殊的事情----不论它看起来有多特殊。

同劣质数据质量作斗争并不需要月光宝盒,但是它需要持久、努力地坚持做好持续优化数据质量的工作。数据质量管理没有月光宝盒这样的神奇物件,所以别再幻想你可以念“波若波罗密”给数据带来华丽蜕变。

尽管我们无比钟爱《大话西游》,但是真的没有月光宝盒,这一点我们大家都清楚。

评论(2)

您可以在评论框内@您的好友一起参与讨论!

    1. 姜稳 同劣质数据质量作斗争并不需要月光宝盒,但是它需要持久、努力地坚持做好持续优化数据质量的工作。

      回复[0] 2012/12/04 16:49

    1. 徐蕊 学习,但能否多说实践少些理论呢?

      回复[0] 2012/12/04 14:12

<--script type="text/javascript">BAIDU_CLB_fillSlot("927898");