消除重复值数据清理方法的研究

脏数据是整个数据仓库的隐患,因此数据清理对维护数据仓库和大型数据库极有价值。本课题介绍和研究数据清理的方法和技术,重点讨论消除中文重复数据的分析方法,并且对这些方法进行验证,分析和实现。