一、ETL工具

德雅通科技的结构化数据采集产品是一款基于通用结构化数据的大数据数据采集处理产品，可对结构化原始数据进行采集和清洗，并基于标准数据规范，对采集数据进行数据清洗，生成和输出标准数据记录，同时向大数据仓库进行数据写入，为上层应用提供统一的标准数据源支持。

• 支持46种数据传输协议
• 支持HBASE,ORACLE,MYSQL等多种关系型及分布式数据库
• 数据处理效率高
• 支持定时任务

一、分布式互联网采集系统

德雅通科技的分布式互联网采集系统是一款对互联网数据进行大数据数据采集处理产品，可对互联网数据进行采集和清洗，并借助标准数据规范，采用自然语言处理引擎，生成和输出用户所需要的非结构化数据，并向大数据仓库进行数据写入，为上层应用提供统一的标准数据源支持。

• 支持用户自定义的爬取模板
• 支持HBASE,ORACLE,MYSQL等多种关系型及分布式数据库
• 支持自然语言处理
• 支持定时任务
• 支持多任务处理

德雅通科的自然语义分析引擎产品是一款用于处理非结构化数据的数据采集处理产品，识别率可达到90%以上，其可对非结构化原始数据进行实体识别、关键字提取、推荐和概要提取，并能够对接机器学习，实现对非结构化数据的处理和应用，同时支持Neo4j借口，可向图数据库进行数据写入，为上层应用提供图谱支持。

自然语义处理德雅通科技的自然语义分析引擎产品是一款用于处理非结构化数据的数据采集处理产品，识别率可达到90%以上，其可对非结构化原始数据进行实体识别、关键字提取、推荐和概要提取，并能够对接机器学习，实现对非结构化数据的处理和应用，同时支持Neo4j借口，可向图数据库进行数据写入，为上层应用提供图谱支持。特点：ü 自主知识产权ü 多级，模块化设计ü FST规则和统计混合模型ü 分布式计算（Hadoop）ü 用户自定义词典，模块ü XML标准格式输出。

一、数据治理

德雅通科技数据治理产品是大数据数据处理深度发展的重要产品，从架构到代码均针对元数据数据库及模型进行针对性设计和优化，能适应企业复杂的IT 异构环境，可快速部署。产品提供完善的元数据管理功能，能满足超大量数据处理分析需求，是管理机制、数据资产保值与增值的一流选择，是企业完善数据资产的重要基础。

二、质量管理

德雅通科的大数据质量管理产品可以自动实现数据清洗和数据稽核，对数据实现数据质量处理，为用户在数据仓库以及其他大数据应用之前做好数据质量基础。这个规则可以与数据治理系统集成，部署在批量或实时的环境中，确保数据质量得以持续改善。德雅通科技的大数据质量管理产品可确保大数据的准确性、唯一性和及时性，跟踪和监控数据质量问题，为业务创新提供数据质量保障。

三、数据服务

数据服务系统是一个提供企业级数据服务所必须的工具与服务的系统。该产品提供一个全面、一致的统一数据服务工具，能够将大数据环境中的所有数据，与第三方系统无缝交换数据，确保数据质量，使用分布在大数据环境内的数据安全、经济、高效的对外部提供数据开放服务，创造数据经济价值，为外部业务系统提供数据应用。

• 高性能：基于Hadoop集群的数据处理，拥有水平扩展处理能力；对源与目标库完全无依赖，兼容各种数据源；基本不占用数据库计算资源；
• 图形化：图形化的数据流、工作流编辑与展示
• 易扩展：在工作流中直接集成第三方MR程序，可集中调度Hive、Pig、MR job、存储过程、shell等资源；同时可以向第三方应用提供Hadoop计算资源的动态申请、调度、管理
• 自动调度

一、数据可视化

德雅通科技数据可视化产品是针对商业智能应用领域的大数据可视化快速构建平台。用户可通过对表格、图形和查询条件等多种商业智能应用组件的可视化拖拽操作来构建大数据分析页面，简化开发流程，大幅度提升开发效率，降低成本。同时提供丰富的编程接口，支持23种数据图形表达方式，同时提供给用户丰富的应用自由度，能够更好的支撑用户的信息获取、数据分析、业务监控、规律发现等需求。

二、知识图谱

德雅通科技知识图谱产品是针对数据关系应用领域的可视化产品。产品可建立数据实体关系，对数据间关系进行直观、有效的展现，提升数据理解能力，降低数据复杂。同时提供丰富的数据关系描述，支持社交分析，并提供给用户导出借口，能够生成DOCPDFJPG等数据文件，能够满足用户对数据关系发现的业务需求。

德雅通科技大数据处理平台，包含了现阶段成熟的大数据处理技术组件，以及中霖科技开发的相关应用和组件，能为客户提供包含数据存储、资源调度、监控、Hadoop作业调度和NoSQL数据储存及查询等相关技术和实现。

可以帮助用户快速的搭建大数据平台，处理大数据问题，找到挖掘数据价值的方法，变现数据价值，同时帮助用户减少开发和后期维护成本。