用友BQ：大数据不容忽视数据集成管理

　　摘 要：用友BQ包含了数据集成平台，它涵盖了传统ETL、ELT的能力，提供了丰富的数据处理、转换功能组件，同时可集成实时数据复制、主数据管理产品(MDM)，为企业提供一个全面的数据集成处理解决方案;

　　一提大数据，更多受到关注的大数据的分析，因为只有将大数据进行全面分析过后，才能发现它更多价值。然而，大家忽略了这些数据的来源以及复杂程度等。应用系统越来越多，数据格式越来越复杂，这些数据在分析之前，必须解决的一个问题就是，如何将各种类型的数据进行整合，并能实时的去管理它们。

　　传统数据集成技术主要关注于架构和相关编程模型的ETL、ELT、CDC和EAI类型。然而，在大数据环境里，这些技术需要根据规模和处理复杂度等需求进行修改，其中包括需要处理的数据格式，需要应对的高并发量，以及需要实时的需求等。

　　用友BQ是集企业多系统的数据平台、分析平台、管理平台、挖掘平台于一体的全方位BI解决方案。最新技术架构体系下的用友BQ具备大数据处理与分析能力，且大大提高了数据分析的速度和效率。

　　用友BQ包含了数据集成平台，它涵盖了传统ETL、ELT的能力，提供了丰富的数据处理、转换功能组件，同时可集成实时数据复制、主数据管理产品(MDM)，为企业提供一个全面的数据集成处理解决方案;实时数据集成除了可集成到数据集成产品中提供实时能力之外，也可单独部署，满足企业实时数据同步、灾备等需要。用友BQ数据集成包含DI和RDI两部分。

　　DI产品通过图形化的开发、管理和监控界面，整个数据集成的抽取、转换、加工整合过程只要通过简单的拖拽就可以实现。数据集成应用开发采用过程流式的组织方式，分为作业和转换两个层次。其中作业支持嵌套，从而实现可自顶向下、逐步细化的开发设计。产品支持各种平台和广泛的数据源，提供了丰富的数据转换功能组件，最大程度的简化数据集成应用开发。产品服务端基于UAP平台的基础运行框架，提供作业的集群执行、运行调度、日志监控及性能分析等功能。DI产品主要包括客户端设计器和服务端的运行和管理工具。