查询 | 报表 | 分析 | 仪表盘经理 | 数据整合 | 数据挖掘
BlueQuery蓝葵商业智能的数据整合
- 超高速的数据整合技术

数据整合(Data Integration)是Bluequery Enterprise V的全新控件,是全球效率和扩展性最佳的数据整合平台。利用它,您能轻松实现数据整合,包括数据抽出(Extraction)、转变(Transformation)和载入(Loading),并确保数据的准确性和完整性。针对海量数据,它采用了多种高端创新技术,大大提升了企业整合数据的效率。

“2005-06-10[软件世界]数据仓库 vs.数据库(参看详细文章)”中指出,从广义的数据仓库应用角度看,数据库应用主要用于业务处理,数据仓库应用则面向联机分析处理,包括对多种数据源的集成(ETL)、数据存储、多维数据的生成、数据展现、灵活分析和数据挖掘等。随着数据仓库应用逐渐走向企业全员的发展趋势,大量的在线查询需求日益加强,效率而不是数据更新效率、查询的数据量巨大查询复杂,BlueQuery的全新数据整合(Data Integration)控件应运而生。

数据整合两大模块

语义层技术

语义层技术通过信息域(Infosphere)来构建自身的数据仓库,通过信息域可将数据库的表和字段名转化为您熟悉的业务用语(中文或英文),并归类,使用户能更快地从商务智能(BI)项目中创造价值,因为它们可以利用预构建的数据模型、转换逻辑和数据流来从用友、金碟、QAD、SAP、 Oracle及Siebel企业应用程序中提取数据。

超速ETL引擎

今天一个商业智能产品(BI)成功的关键,在于怎样将数据转换,不论数据在哪,不论什么格式。BlueQuery 的超速ETL引擎提供给企业一个最强大的ETL数据整合平台, Sunnet自2002年底完成通用ETL引擎支持Oracle、SQL Server、Informix、DB2、Sybase、Progress等等各种关系型数据库后,又耗时3年的研发时间开发了代号为“BlueQuery - P” 超高速ETL引擎,并于2006年1月份宣布正式推出市场!

Sunnet研发“BlueQuery - P”的超高速ETL引擎现只支持Oracle与SQL Server,对Oracle、SQL Server抽取与加载测试指标为100万行含18个各种类型字段的数据,比Microsoft DTS 速度快10倍以上


   
强大功能特点:

1、提供一条龙数据仓库服务,由建模、制作、管理及生成综合平台;
2、简易快速的ETL引擎;
3、本地化的ETL引擎,解决中文乱码的问题,如转换Oracle UTF8乱码。

 
 
 
解决的问题(1):令人头疼的UTF8乱码,BQ ETL是怎么克服的?
Oracle数据库字符集为UTF8时中文出现乱码,这是个常见问题,后来我们公司测试人员使用Cognos、Business Object、Crystal Report、润乾报表等做测试均出现同样问题。

经公司技术人员研究,找到了解决问题的办法,但不能使用现有的OLE DB、ODBC、JDBC等通用驱动程序,而必须开发专有驱动程序即所谓的Native Driver(目前BQ新版本的超高速ETL引擎就是使用该类驱动程序)。新的驱动程序不仅可以解决UTF8乱码问题,还可显著提高Oracle查询性能。

BQ Oracle Native Driver的测试程序进行了多方面测试,能很好地解决乱码问题,完全达到与Oracle SQL Plus一致的效果。比Oracle SQL Plus优越之处在于:

不必修改注册表字符集设置,可单独针对不同数据库在程序中做不同的字符集设置,互不干扰,从而可让多个不同Client端字符集的数据源并存。而SQL Plus必须依赖当前注册表的设置,启动后不可修改字符集设置,重新修改注册表后必须退出SQL Plus重新进入。

点击查看BlueQuery制作数据整合的做法

 


查询 | 报表 | 分析 | 仪表盘经理 | 数据整合 | 数据挖掘

欢迎查询 +86 20 83646064
alex@bluequery.com.cn

Sunnet Company Limited版权所有 2006年
保留所有权利