科学家创建了AI系统来识别和消除数据中的错误

人工智能2020-03-23 16:01:04
导读我们生活在数据世界中。我们的设备非常智能,我们的环境中充满了各种开关和传感器,我们的数据正在以多种不同的方式进行分析和使用。然而,

我们生活在数据世界中。我们的设备非常智能,我们的环境中充满了各种开关和传感器,我们的数据正在以多种不同的方式进行分析和使用。然而,人类并不存在于这些过程中,并且很多这些数据实际上都很脏。我们如何筛选它以找到真正重要的东西?科学家们,滑铁卢大学,威斯康星大学和斯坦福大学开发了一种名为HoloClean的工具,可以识别和删除脏数据。

脏数据本质上是由各种传感器或算法收集的噪声。想象一下,正在分析您网站数据的系统。它可以访问各种信息,但并非所有信息都相关。事实上,有些甚至不是真实的 - 它是噪音,它自然发生在所有电子系统中。HoloClean是世界上第一个基于人工智能的技术,旨在识别脏数据并在传递之前对其进行纠正以进行处理。科学家表示,这个工具可能对处理大量数据的各种组织有用。

科学家指出,银行,公用事业公司和许多其他企业正在处理大量数据。不可避免的是,其中一些是不好的 - 它可能是不准确的,错误的或简单的无关紧要。HoloClean可以接受培训,以发现错误并自行纠正错误。当然,培训人工智能本身就是一个漫长的过程,但最终HoloClean会根据这些数据前往城镇,分离错误并予以纠正。如果这是最好的决定,或者将它们从数据池中排除。这将为用户提供更清晰的数据集,以便在他们的分析中使用。最终目标是更容易分析,获得更准确,可靠的结果。

到目前为止,必须手动识别和纠正不正确的数据。这是一个漫长而昂贵的过程,甚至都不完全准确。科学家希望HoloClean可以加快这项工作,使其更容易,更准确。HoloClean的开发人员之一Ihab Ilyas说:“这个系统解决了信息存在的问题,人们正在使用它来运行分析,但这不正确。它不提供不存在的信息,而是纠正您认为正确的信息“。

对准确数据进行操作非常重要。只有这样,您才能希望获得准确的结果并做出有意义的决定。这是人工智能手中可能更好的工作之一。可以训练这样的系统来筛选大量数据,识别错误并纠正错误,并且这个过程既快速又准确。

免责声明:本文由用户上传,如有侵权请联系删除!