当前国家把数据当作重要的资源，企业也非常重视对数据的管理、应用，因此近几年社会对数据处理方面的人才需求是比较大的，人们也比较注重对数据处理软件应用能力方面的提升。
数年来，星环科技一直坚持自主研发，逐年推动技术进步，2013年星环科技创立时就从大数据的四个角度来定义产品，来解决大数据的4个V的需求，数据量大、数据的种类多、数据的实时性要求高、要从数据中发掘价值。TDH是可以用于解决大数据四个V的一站式平台解决方案，①大量化(volume)，采用分布式计算和分布式存储框架，充分利用计算机集群的整体计算和存储能力，解决了数据大量化问题。② 速度化(velocity)：采用实时流处理引擎，解决了用户对数据处理时效性的需求 ③ 多样化(variety)：处理的数据类型不再局限于结构化数据，能同时处理文本数据、图数据等非结构化数据。 ④价值提升(value)：充分利用数据，用于多种数据模型的分析，提升数据价值。
二、数据预处理： 在进行数据匹配之前，我们需要先进行数据预处理，以确保表格中的数据格式一致、干净无误。以下是一些常用的数据预处理步骤：