Please note that JavaScript and style sheet are used in this website,
Due to unadaptability of the style sheet with the browser used in your computer, pages may not look as original.
Even in such a case, however, the contents can be used safely.

NEC发布大数据处理引擎Inforame DataBooster V5.1中文版

2014-8-28

        2014年8月28日,NEC(中国)有限公司正式发布“内存型高速数据处理引擎”——Inforame DataBooster V5.1中文版。

 

        信息化高速发展的今天,随之而产生的是海量级的数据。针对如此庞大的数据,快速有效地做出各种分析是目前面临的迫切需求。由此应运而生的NEC InfoFrame DataBooster系列,属于内存型高速数据处理引擎,拥有列存储和内存型数据处理技术,能够高速处理海量数据,相比传统的RDB,数据处理速度可提高40倍,实现通过数据库优化无法达到的处理速度。

 

【背景】

       随着数据量的增加,增强CPU性能固然能缩短处理时间,但是缩短I/O时间才是更加有效的方法。为此产生了一个新方法:不在传统硬盘中保持数据,而是保持在内存里。特别是从2010年开始,单台服务器搭载的内存量急剧增加,成本也变得更加便宜,这使得仅靠内存来保持数据更便于推广,大幅缩短了I/O处理时间。今后服务器搭载的内存会越来越多,在内存中处理数据也将会受到愈来愈多的关注。

 

【课题】

・夜间批处理未能及时处理结束,影响了正常工作

・无法对堆积的大量历史数据进行分析

・数据量太大而无法做成数据集市从而放弃了理想的分析模式

・即使进行了调优,数据库的性能改善无法达到预期的效果

・数据统计花费了大量时间,无法立刻获得想要的数据

NEC基于性能和成本的考虑,为有上述课题的用户提供了新型高速内存型数据处理技术产品DataBooster的解决方案。

 

【技术特点】

1)列存储和内存处理技术

・Inforame DataBooster采用了列存储且内存最优化的处理技术,通过特有的数据构造方式,减少了内存使用量。同时把传统RDB的行记录的逐条处理转变成列单位的批量处理,提高了处理速度。

2)多样化接口

・Inforame DataBooster提供标准的C语言和Java语言的API接口以及SQL接口,通过C语言或者Java语言,把排序、统计、查询、结合、计算等操作写成批处理程序,实现自动化处理。

・自动生成Java代码功能,也大大提高了生产性,降低了重复编码带来的风险。

・SQL接口的开发使用了PostgreSQL,支持大部分SELECT、INSERT、UPDATE、DELETE的SQL操作,除此之外,还可以执行REPARE、EXECUTE、EXPLAIN等操作。

・简单易用的图形化操作工具、检索、统计、结合、批量更新等功能可一边确认结果一边处理数据,最后导出CSV形式的处理结果。

        NEC拥有完整的大数据产品线,可结合客户具体需求提供实现大数据处理的多样化技术,和客户共同确定利用数据的目的及分析方法,为客户制订个性化的大数据解决方案。NEC在进军大数据市场的路上脚踏实地,未来会不断为市场带来更多产品和解决方案。

************************************************************************************************************************************************

NEC(中国)有限公司:是IT&通信巨头NEC公司在国内的全资子公司,主要业务包括IT解决方案、IT/网络平台、通信网络、通用信息产品以及系统开发等。NEC是较早倡导智慧城市建设的企业之一,依托在物联网和云计算上的技术优势和对各行业的理解和经验,NEC侧重在智慧城市的三大领域——安心安全、养老健康管理、节能环保贡献自己的力量。详情请参考:http://cn.nec.com/

 

<媒体联系>
NEC(中国)有限公司
企划部 陈抒
电话:010-59181158
E-mail:chen_shu@nec.cn


分享到