二十一世纪企业发展的方向是各种系统越来越复杂化,而利用大数据则技术是对复杂系统的一种把握。
本文剖析了企业大数据发展现状,以及分析大数据平台在重点领域中的应用情况。
企业大数据显雏形
我国企业对大数据的应用主要可分成三个阶段:
在2010年到2012年之间的第一阶段,大数据应用关注数据和机器的关系,由于局限于传统的IT思维,只不过在很多小数据应用上贴上了大数据标签;
从2013年开始的第二阶段开始关注数据与人的关系,可视化和预测应用成为了市场的宠儿;
2014年之后的第三阶段,大数据应用的重点已经转向分析数据和数据之间的关系,这要求对企业大数据应用进行开放式的创新:从数据的开放、共享和交易,到基础处理和分析平台的开放,再到价值提取能力的开放。
随着企业业务外延、从企业内部不断向外部、向企业所处的产业链和生态圈扩展,企业的数据视野也越来越宽,从主要关注企业内部数据,已经延伸到关注社会数据,包括交易的数据、人工合成的数据、机器的数据、社会网络的数据等在内的企业数据在不断被重新认识。
大数据平台建设问题
企业拥有很多的业务数据库,有订单、CRM、合同管理、人力资源等数据库。以往,我们会把这些数据库里的数据做集成,做一个简单的数据仓库,然后根据业务需求,在数据集成的基础上,通过报表建立一个决策系统,做数据展示,提供服务。这个过程的好处是开发成本低,投入成本低,技术架构简单,可以非常快速的在公司内部运行起来。
但是这样的方式随着业务系统的增多,逐渐开始不适用。
一是业务数据多样化、数据未集中管理、有效利用数据难度大。数据存储能力受限,无法追溯较远的历史数据。
二是很多情况下,不同的产品经理和工程师所提的需求是不同的,而且这些不同的需求本身是交织在一起的。因此不同的团队做出同样的指标,由于数据指标定义不一致,存在意义相近重复指标的时候,管理层很难做出决策。
三是分析和运营使用的数据渠道完全依赖于自身数据的监控,这会导致IT部门工作压力较大。
除了以上反映的问题,公司在基于未来发展情况下又呈现了新一轮的现状,并提出了以下需求:
业务的多元化发展,公司大量的并购导致集团数据量和数据需求爆发式增长;
数据网状流通,基础数据、数据指标缺少统一的元数据管理;
为了更好发掘数据价值,提升数据能力、构建标准化数据体系成为当务之急。
大数据平台建设
为此,博易智软针对企业大数据应用和服务模式的创新研究,结合多年的行业积累和沉淀,不断创新和完善Super Center大数据平台,以求为用户提供更好更全面的数据服务,满足各行业领域的需要。
Super Center大数据平台+企业大数据
=更全更专更深更好
Super Center大数据平台技术特点
1.一键部署
简化繁杂的部署流程,使大数据平台实施部署简单高效
2.在线伸缩
在不停机的情况下,可任意增加和减少节点
3.兼容性好
兼容市面多数主流硬件,均能实现无缝对接
4.同步无限升级
开源社区原生组件
5.易于开发
兼容Oracle全部语法,支持标准SQL语法
6.独有的可视化工作流开发
通过对数据的深入分析,能够提供有价值战略指导
7.独有的任务调度中心
采用YARN作为统一的资源管理系统,可以集成Stom、Spark、MR、Hive、Tez、HBase等多种计算框架。
8.支持自定义外部大数据组建接入
拥有多种数据接口,支持多种数据仓库/数据集市等数据存储环境,离线数据分发等。
9.支持数据传输加密和数据应用加密
保证企业数据安全。
10.丰富的应用
满足实时计算、实时搜索、查询系统等,实现业务多维度大数据搜索查询。
价值应用
Super Center大数据平台建设意义
对于企业而言,应用Super Center大数据平台主要有三方面的价值。
第一,为企业提供大数据存储、数据挖掘、离线计算、在线计算等核心功能,处理企业以前无法处理,或者无法实时与快速处理的海量数据,包括结构化和非结构化数据。
第二,企业可以利用‘大数据平台+解决方案’,对分布于社交网络、视频网络等各种互联网中的海量数据进行提取、整理、分析,并进而从这些新的数据中获取新的洞察力,将它与已知业务的各个细节相融合,促进企业产品和服务的营销。
第三,还可以利用自己积累的或存在于互联网中的大数据,通过多种数据接口,为企业内部各种信息系统提供存储和计算平台,推出各种新产品和新服务,助力企业发展。