数据清洗

✍ dations ◷ 2025-07-26 16:26:59 #数据清洗

数据清洗(data cleaning)是从记录集、数据库表或数据库中检测和纠正(或删除)损坏或不准确的记录的过程,是指识别数据的不完整、不正确、不准确或不相关部分,然后替换、修改、或删除脏数据或粗数据。数据清洗可以与数据加工工具交互执行,也可以通过脚本进行批处理。

清洗后,一个数据集应该与系统中其他类似的数据集保持一致。 检测到或删除的不一致可能最初是由用户输入错误、传输或存储中的损坏或不同存储中类似实体的不同数据字典定义引起的。 数据清理与数据确认(data validation)的不同之处在于,数据确认几乎总是意味着数据在输入时被系统拒绝,并在输入时执行,而不是执行于批量数据。

数据清洗不仅仅更正错误,同样加强来自各个单独信息系统不同数据间的一致性。专门的数据清洗软件能够自动检测数据文件,更正错误数据,并用全企业一致的格式集成数据。

相关

  • 文艺复兴文艺复兴是一场大致发生在14世纪至17世纪欧洲的文化运动,在中世纪晚期发源于意大利中部的佛罗伦萨,即意大利文艺复兴,后扩展至欧洲各国。其辞源为意大利语“Rinascimento”,由ri
  • 奥勒留马可·奥勒留(拉丁语:Marcus Aurelius,121年4月26日-180年3月17日),全名为马可·奥勒留·安敦宁·奥古斯都(拉丁语:Marcus Aurelius Antoninus Augustus)。是罗马帝国五贤帝时代最后
  • 宗懔宗懔(?-?),字元懔,南阳郡涅阳县(今河南省邓州市)人,南梁学者暨文学家,著有《荆楚岁时记》。宗懔从少年时代就天资聪颖,相当好学,说话常引用典故,乡里的人皆称呼他“小儿学士”。梁普通六年
  • 耶和华见证人系列的一部分耶和华见证人分裂团体(英语:Jehovah's_Witnesses_splinter_groups)出版发行:纽约守望台圣经书社耶和华见证人(曾称“圣经研究者”)是19世纪后半期从圣经研究运动中兴
  • 董子健董子健(1993年12月19日-),中国大陆男演员,现为中央戏剧学院2014级表演系学生。董子健是中国著名经纪人王京花之子,曾就读于北京海淀区外国语实验学校、北京耀中国际学校、北京市第
  • 贡萨洛·科尔多瓦贡萨洛·塞甘多·科尔多瓦·伊·里韦拉(西班牙语:Gonzalo Segundo Córdova y Rivera,1863年-1928年) 厄瓜多尔总统(1924-1925)。像他在自由党的前任,他被视为一个" la argolla "
  • 安德烈·康查洛夫斯基安德烈·米哈尔科夫·康查洛夫斯基 (俄语:Андре́й Серге́евич Михалко́в-Кончало́вский,1937年8月20日-)是俄罗斯的电影导演、编剧与制
  • 任球任球(1918年-2019年5月9日),安徽无为人,中国人民解放军将领。1979年,接替朱云谦,担任广州军区空军政治委员。1983年,由刘锋接任。
  • RPG Maker MVRPG Maker MV为电子角色扮演游戏的制作工具。由KADOKAWA的尾岛阳儿带领制作、Spike Chunsoft贩售。Steam多语言(含中文)版在2015年10月23日发售,日文版在2015年12月17日发售。RPG Maker VX Ace的后继版本,PC版RPG制作大师的第11代。根据购买版本,所附赠的素材数量也不同。是历代图片、音乐等素材附赠最多的一次。Steam版能透过DLC来额外购买素材。操作性与前作无太大差异,但增加支持触控面板、菜单按钮放大、战斗画面支持第一人称或横版战斗等,官方插
  • 点字机点字机(braille typewriter、Perkins Brailler;柏金斯点字机)为了使书写点字更方便和快速,为美国的盲人机构柏金斯启明学校的校长"加布里埃尔·法瑞尔"(Gabriel Farrell)请求该校的木工教师"大卫·亚伯拉罕"(David Abraham)和数学教师"爱德华·沃特豪斯"(Edward Waterhouse)着手设计这机器,并于1951年成功制成柏金斯点字打字机。在这数十年来,这点字机已卖至余170个国家,卖出超过280,000台。点字机的主要按钮有分别代表一至六点的