当前位置:首页 > 数据中心 > 正文

大数据中心平台建设


一、如何搭建大数据分析平台?我是一名大数据技术人员,我可以给面试官分享一些经验:
当然,面试官应该了解以下问题,一旦回答了,问题的答案就出来了:
1.是的,您想在个人学习和发展方面搭建一个自学平台吗?或者当今的公司是否需要大数据技术进行分析?--对于个人学习和开发来说,建议直接按照Hadoop或者Spark官网教程来安装,功能信息和错误信息都是英文的,包括遇到的问题的解答,所以还是很重要的。如果企业想要进行大数据分析,需要考虑以下问题:为什么要构建大数据分析平台?正在解决什么业务问题?需要什么分析?有多少数据?需要实时分析?需要商业智能报吗?--这是一个典型的场景:公司之前使用Oracle或MySQL构建了业务数据库,并做了简单的数据分析,也可以是现有业务系统数据库支持的BI系统。数据不断增加,随着数据的增长,必须使用它来扩展大数据技术。定义需求后,按以下步骤进行:
1总体方案设计;几十TB?数据存储在哪里:MySQL中?神?或者另一个数据库?数据如何从现有存储系统流向大数据平台?如何将输出数据写入另一个存储系统?什么是分析主题:一些简单的指标?还是有那么多的统计指标需要专家来整理、分组和设计产品,我们需要建立一个综合的数据仓库?需要BI报表:业务人员有做BI的能力,或者团队构成比较简单,不需要前端和后端人员的输入,所以使用BI比较方便;需要时间计算吗?2.架构设计完成后,需要进行组件选型。Tez...实时计算引擎:Storm、Flink、Samza、SparkStreaming...BI软件:Tableau、QlikView、帆软...
3.安装部署选择完成后,即可安装。及部署
4.另一种选择:如果组织需要构建大数据平台,另一种选择是使用业务数据平台。市场上有很多成熟的商业大数据平台,包括Cloudera、Starring、华为、亚信科技等,都有相关的产品线,袋鼠云作为业界的大数据玩家,拥有优秀的大数据平台。产品:数据堆栈。主要特点如下:
1.一站式数据库开发产品体系,满足企业在构建数据库中间件过程中多样化、复杂的需求。2.兼容性强。它支持与多种计算引擎对接,让更多企业在路上触达它。3.开箱即用。基于Web的图形操作界面,开箱即用,快速启动。4.性价比高。满足中小企业数据中心建设需求,降低企业投资成本。