首页 资讯 财经 汽车 关注 科技 房产 图片 全国 视频

数据

旗下栏目: 业内 数据 数码 手机

顶级Hadoop打点员口试问题与答复

来源:新闻门户     作者:华夏门户     浏览:次     发布时间:2021-06-11
摘要:在2010年,没有人知道什么是Hadoop,可是本日,房间里的大象这个符号已经成为了大数据的宠儿。按照Wikibon, Hadoop市场……

中国IDC圈4月8日报道,在2010年,没有人知道什么是Hadoop,可是本日,房间里的大象这个符号已经成为了大数据的宠儿。按照Wikibon, Hadoop市场在2012年,供给商的收入已经有256美元,估量2017年底增加到17亿、措施员、架构师、系统打点员和数据客栈员都在千方百计地进修存储和处理惩罚大数据集的Hadoop。开始一个Hadoop打点员口试将会成为一个单调枯燥的事情,假如你没有花足够的时间来筹备。

专业人士正在实验为hadoop开拓者和打点者事情,不只仅是要尽力筹备hadoop打点者的口试题。当人们处在hadoop开拓者的位置,可以自由的筹备与打点相关的hadoop口试问题,这对付那些正在筹备进入hadoop打点者的脚色的人们是很重要的,得到hadoop打点者口试问题的细节。在我之前的TOP100的帖子里的口试问题及谜底和TOP50的Hadoop的口试问题,我们列出了所有大概对Hadoop开拓口试者问的问题。本文罗列了顶级Hadoop打点员的口试问题及谜底,这些问题和谜底在hadoop打点事情口试时很大概会被问到的。

计较机研究发明Hadoop的技术差距是整个大数据范畴内最大的。在大数据的空间里,Hadoop被各行业应用,Hadoop打点的重要性是不容忽视的。无数的行业雇用Hadoop打点人员,确保他们的大数据系统可以在最巨大和动态的情况下被选中。从金融业到当局部分,各行业雇用hadoop打点人员来打点他们的大数据平台。Hadoop打点专业人才的需求量正不绝上升,以满意专业人才的缺乏。

如何筹备一个Hadoop打点者口试?

Hadoop打点员口试,环绕Hadoop软件安装,设置和维护,测试一个考生的常识范畴,一个Hadoop打点员需要基于好处相关者的需求研究实现特定的平台大数据办理方案。这是一个口试者为Hadoop打点员口试所须要的,能干大型数据打点的观念。为了证明本身是一位及格的Hadoop打点员的候选人,确保对付处理惩罚Hadoop项目标常识和打点本领,展示特定规模的乐趣和专业常识,具有多任务处理惩罚本领和率领本领。

假如你已经申请了Hadoop的打点员事情,那么它值得你花一些时间去回首这些列在下面的口试问题,当你筹备口试时——

Hadoop打点员口试问题与答复

1、 表明差异的设置文件以及它们位于那里

设置文件位于conf子目次。Hadoop有3个差异的设置文件,hdfs-site.xml, core-site.xml 和 mapred-site.xml。

2、 要求运行Hadoop集群的历程是什么

Namenode,DataNode,TaskTracker和JobTracker

3、 你将如何从头启动节点?

最简朴的做法是运行遏制运行呼吁shell剧本,即点击stop-all.sh。一旦这样做了,重启NameNode点击start-all.sh。

4、 表明在Hadoop上的差异的调治措施。

FIFO调治——调治系统中不思量系统中的异质性,但呼吁事情是基于列队到达的时间。

COSHH——这个打算思量事情量,调治决定的聚类和用户异质性。

公等分享——Hadoop调治为每个用户界说。这个处所包括一个资源舆图以及淘汰资源上的狭缝。每个用户都可以利用本身的资源去执行这个功课。

5、 列出几个用于执行复制操纵的Hadoop呼吁

fs –put

fs –copyToLocal

fs –copyFromLocal

6、 什么是批示用的JPS?

JPS呼吁用于验证措施,这种措施运行Hadoop集群是否事情。它呼吁显示输出者的NameNode的近况,Secondary NameNode, DataNode, TaskTracker 和 JobTracker。

7、 当Hadoop陈设出产情况时,什么重要的硬件因素应该思量?

基于应用措施的事情处事和打点处事之间的内存系统的内存需求会有所差异。

操纵系统——一个64位操纵系统,制止了任何限制,可用于在事情节点上的内存量。

存储——最好是通过移动计较勾当数据实现可扩展性和高机能的Hadoop平台设计。

容量——大形的因子磁盘(3.5”)磁盘的本钱较量低,对比较量小的形式因素磁盘答允存储更多内容。

网络——两个TOR网络互换机提供了较好的冗余。

计较本领可以在Hadoop集群的Mapreduce槽可用的数量节点抉择。

8、 有几多节点可以运行在一个单一的Hadoop集群?

只有一个

9、 当Hadoop集群上的节点下来会产生什么呢?

文件系统脱机时,Namenode下来了。

10、 什么是hadoop-env.sh下的文件和在文件应配置为Hadoop的事情上的变量?

这个文件提供hadoop的运行情况,包罗以下variables-hadoop_classpath,java_home和hadoop_log_dir。java_home变量应为Hadoop运行。

11)除了操作JPS的呼吁尚有任何其他什么要领,你可以查抄是否它是事情。

利用呼吁/ etc / init.d/hadoop-0.20-namenode状态。

责任编辑:华夏门户
首页 | 资讯 | 关注 | 科技 | 财经 | 汽车 | 房产 | 图片 | 视频 | 全国

Copyright © www.msgkpx.com 北京新闻网 版权所有 粤icp备10021497号-9

站务联系QQ :

电脑版 | 移动版