当前位置:存储企业动态 → 正文

曙光XData六大优势 布局大数据市场

责任编辑:王文龙 |来源:企业网D1Net  2013-05-22 14:47:37 本文摘自:服务器在线

近年来互联网、云计算、移动终端和物联网迅猛发展。日渐复杂的企业客户信息数据,网店交易记录,视频监控终端产生的信息数据,博客、微博、照片、自创视频等,数据每秒都在爆炸产生……;我们将这种数据无时无刻都在爆炸式增长的现象称之为“大数据时代”。大数据时代,信息成为国家和企业发展的战略资产,大数据分析和挖掘为长远发展提供了决策支持的基础。

当前我国企业面临产业结构升级、市场竞争加剧,持续创新能力不强等困难。企业信息化是产业迈向现代化,增强竞争力的必然过程。曙光认为数据分析是信息化的核心,其主要的手段就是广泛采用大数据分析技术,精准把握消费者需求,推出创新产品和创新服务,创建新的产业群,以促进经济结构调整,提高自主产品研制能力,实现“中国制造”到“中国创造”的转变。

应大数据而生:曙光XData大数据一体机

企业如何在数据爆炸式增长时代,实现商业变革和管理变革?如何提高行业企业创新能力,带动商业模式转型,实现“中国制造”到“中国创造”的转变?XData大数据一体机是曙光立足于当前大数据时代背景下,自主研发的通用海量数据处理平台,可广泛的应用在通信数据统计,互联网/移动互联网的日志和用户行为分析,物联网/传感器网络的数据监控和追踪分析,以及金融交易数据的离线统计和挖掘等众多领域。

XData大数据处理机将数据存储单元和处理单元分离,通过构架高效的服务中间件,将底层采用无共享(shared-nothing)结构的数据存储节点,聚合成一个单一的数据处理系统映像,达到较高的数据读写并发度,计算并发度,以及良好的系统扩展性,可靠性和可维护性。

XData向用户提供统一的类JDBC的客户端编程接口,向下管理分布在不同存储模块上的不同类型的数据,并提供简易的用户管理界面。XData系统的核心技术包括自动的服务注册和负载均衡,可扩展的数据划分和分布策略,高效的批量数据加载,通用的并行查询分析和处理引擎,结构化和非结构化数据的统一访问接口,不同类型数据之间的联合查询和检索,以及全方位的系统故障和恢复处理等多项技术。

曙光XData大数据一体机六大优势

优势1:并行处理架构

①XData采用无共享的结构,提供高速的数据写入能力。写入过程中,采用并行写入的方式,按照一定数据划分策略,将数据写入到后端数据节点。

②XData将查询语句分解成为在多个数据模块并行执行的查询任务流,所有的查询处理都在数据节点上并行的执行,充分利用无共享结构的计算并行度。

③XData提供任务断点执行功能,发生意外情况时,系统启动后继续执行未完成的任务。

优势2:分级存储

XData支持分级存储,以降低系统的总体持有成本。即按照数据量和数据的访问频率,分为在线,离线和备份三个存储级别,并支持数据在各级之间根据策略进行迁移。

优势3:一体化执行框架

①XData提供类JDBC访问接口:XJDBC,有JDBC 使用经验的用户无需额外学习即可很方便的使用XJBDC访问接口;

②XData提供XJDBC/MapReduce混合执行框架,提供跨平台的兼容性;

③XData还提供较XJDBC访问接口更高的性能的专用编程接口。

优势4:图形化监控管理

XData提供基于Web的图形化的管理工具,简化了系统管理员对于大数据系统的管理和维护工作,使得管理一套含有几百个节点的XData和管理一套10个节点的XData的工作量接近。

优势5:高可扩展性

①XData对数据进行细粒度划分,无需进行复杂规划,任意规模的扩展都能够达到数据分布均衡。

②XData提供细粒度数据锁,提高数据访问并发度,减小单个查询操作的无效IO,提高整体处理效率。

优势6:复杂数据类型关联分析

①XData支持大表关联和大表嵌套类等复杂的查询语句的处理。XData系统通过将复杂查询解析成在多个数据节点上的并行任务流,提高复杂查询的处理性能。

②XData支持用户自定义的并行查询任务流,可以支持任意复杂的结构化/非结构化数据处理语义,满足更广泛的应用需求。

XData大数据一体机包含两类组件:计算模块、数据模块和客户端。

计算模块:用于数据的并行加载和查询处理,对客户端提供统一的数据处理接口。

数据模块:用于提供结构化/非结构化数据一体化存储空间,内嵌高性能数据存取引擎,并行处理所有计算模块的数据访问请求。

客户端:用于和用户应用对接,提供XJDBC/MapReduce统一访问接口和各服务专用访问接口。曙光XData大数据一体机与解决方案捆绑可以整合各个层面的数据,从数据收集、数据存储、数据分析、数据应用等方面构建完整的数据管理链条,为政府管理和决策提供切实可信的数据支持,极大地提高公共管理的运营效率,提高政府的信息化决策水平和公共服务水平,最终实现区域社会、经济、民生长期可持续发展。

关键字:XData数据划分

本文摘自:服务器在线

x 曙光XData六大优势 布局大数据市场 扫一扫
分享本文到朋友圈
当前位置:存储企业动态 → 正文

曙光XData六大优势 布局大数据市场

责任编辑:王文龙 |来源:企业网D1Net  2013-05-22 14:47:37 本文摘自:服务器在线

近年来互联网、云计算、移动终端和物联网迅猛发展。日渐复杂的企业客户信息数据,网店交易记录,视频监控终端产生的信息数据,博客、微博、照片、自创视频等,数据每秒都在爆炸产生……;我们将这种数据无时无刻都在爆炸式增长的现象称之为“大数据时代”。大数据时代,信息成为国家和企业发展的战略资产,大数据分析和挖掘为长远发展提供了决策支持的基础。

当前我国企业面临产业结构升级、市场竞争加剧,持续创新能力不强等困难。企业信息化是产业迈向现代化,增强竞争力的必然过程。曙光认为数据分析是信息化的核心,其主要的手段就是广泛采用大数据分析技术,精准把握消费者需求,推出创新产品和创新服务,创建新的产业群,以促进经济结构调整,提高自主产品研制能力,实现“中国制造”到“中国创造”的转变。

应大数据而生:曙光XData大数据一体机

企业如何在数据爆炸式增长时代,实现商业变革和管理变革?如何提高行业企业创新能力,带动商业模式转型,实现“中国制造”到“中国创造”的转变?XData大数据一体机是曙光立足于当前大数据时代背景下,自主研发的通用海量数据处理平台,可广泛的应用在通信数据统计,互联网/移动互联网的日志和用户行为分析,物联网/传感器网络的数据监控和追踪分析,以及金融交易数据的离线统计和挖掘等众多领域。

XData大数据处理机将数据存储单元和处理单元分离,通过构架高效的服务中间件,将底层采用无共享(shared-nothing)结构的数据存储节点,聚合成一个单一的数据处理系统映像,达到较高的数据读写并发度,计算并发度,以及良好的系统扩展性,可靠性和可维护性。

XData向用户提供统一的类JDBC的客户端编程接口,向下管理分布在不同存储模块上的不同类型的数据,并提供简易的用户管理界面。XData系统的核心技术包括自动的服务注册和负载均衡,可扩展的数据划分和分布策略,高效的批量数据加载,通用的并行查询分析和处理引擎,结构化和非结构化数据的统一访问接口,不同类型数据之间的联合查询和检索,以及全方位的系统故障和恢复处理等多项技术。

曙光XData大数据一体机六大优势

优势1:并行处理架构

①XData采用无共享的结构,提供高速的数据写入能力。写入过程中,采用并行写入的方式,按照一定数据划分策略,将数据写入到后端数据节点。

②XData将查询语句分解成为在多个数据模块并行执行的查询任务流,所有的查询处理都在数据节点上并行的执行,充分利用无共享结构的计算并行度。

③XData提供任务断点执行功能,发生意外情况时,系统启动后继续执行未完成的任务。

优势2:分级存储

XData支持分级存储,以降低系统的总体持有成本。即按照数据量和数据的访问频率,分为在线,离线和备份三个存储级别,并支持数据在各级之间根据策略进行迁移。

优势3:一体化执行框架

①XData提供类JDBC访问接口:XJDBC,有JDBC 使用经验的用户无需额外学习即可很方便的使用XJBDC访问接口;

②XData提供XJDBC/MapReduce混合执行框架,提供跨平台的兼容性;

③XData还提供较XJDBC访问接口更高的性能的专用编程接口。

优势4:图形化监控管理

XData提供基于Web的图形化的管理工具,简化了系统管理员对于大数据系统的管理和维护工作,使得管理一套含有几百个节点的XData和管理一套10个节点的XData的工作量接近。

优势5:高可扩展性

①XData对数据进行细粒度划分,无需进行复杂规划,任意规模的扩展都能够达到数据分布均衡。

②XData提供细粒度数据锁,提高数据访问并发度,减小单个查询操作的无效IO,提高整体处理效率。

优势6:复杂数据类型关联分析

①XData支持大表关联和大表嵌套类等复杂的查询语句的处理。XData系统通过将复杂查询解析成在多个数据节点上的并行任务流,提高复杂查询的处理性能。

②XData支持用户自定义的并行查询任务流,可以支持任意复杂的结构化/非结构化数据处理语义,满足更广泛的应用需求。

XData大数据一体机包含两类组件:计算模块、数据模块和客户端。

计算模块:用于数据的并行加载和查询处理,对客户端提供统一的数据处理接口。

数据模块:用于提供结构化/非结构化数据一体化存储空间,内嵌高性能数据存取引擎,并行处理所有计算模块的数据访问请求。

客户端:用于和用户应用对接,提供XJDBC/MapReduce统一访问接口和各服务专用访问接口。曙光XData大数据一体机与解决方案捆绑可以整合各个层面的数据,从数据收集、数据存储、数据分析、数据应用等方面构建完整的数据管理链条,为政府管理和决策提供切实可信的数据支持,极大地提高公共管理的运营效率,提高政府的信息化决策水平和公共服务水平,最终实现区域社会、经济、民生长期可持续发展。

关键字:XData数据划分

本文摘自:服务器在线

电子周刊
回到顶部

关于我们联系我们版权声明隐私条款广告服务友情链接投稿中心招贤纳士

企业网版权所有 ©2010-2024 京ICP备09108050号-6 京公网安备 11010502049343号

^