本篇目录：
- 1、大数据技术Hadoop面试题
- 2、客户端通过什么方式与namenode建立连接
- 3、哪个程序通常不与namenode在一个节点启动
- 4、以下选项中哪个程序负责hdfs数据存储
- 5、hadoop中主机有多少个进程是对的
大数据技术Hadoop面试题
1、广义上hadoop是指与hadoop相关的大数据生态圈。包含hive、spark、hbase等。 狭义上hadoop指的是apache的开源框架。
2、您对大数据一词有什么了解？ 大数据是与复杂和大型数据集相关的术语。关系数据库无法处理大数据，这就是为什么使用特殊的工具和方法对大量数据执行操作的原因。
3、大数据和Hadoop几乎是同义词。随着大数据的兴起，专门从事大数据操作的Hadoop框架也开始流行起来。专业人员可以使用该框架来分析大数据并帮助企业做出决策。注意： 这个问题通常在大数据访谈中提出。
4、Hadoop面试和学习小结 随着大数据的盛行，Hadoop也流行起来。
5、关于数据分析师常见的面试问题集锦 你处理过的最大的数据量？你是如何处理他们的？处理的结果。
客户端通过什么方式与namenode建立连接
RPC。客户端需要依次连接到每个NameNode，通过RPC方式与NameNode建立通讯。客户端（Client）或称为用户端，是指与服务器相对应，为客户提供本地服务的程序。
客户端通过一个可配置的TCP端口连接到Namenode，通过ClientProtocol协议与Namenode交互。而Datanode使用DatanodeProtocol协议与Namenode交互。一个远程过程调用(RPC)模型被抽象出来封装ClientProtocol和Datanodeprotocol协议。
这是hdfs的本地golang客户端。 它使用协议缓冲区API直接连接到namenode。它尝试通过在可能的情况下对stdlib os包进行os.FileInfo来使其成为惯用语言，并从中实现接口，包括os.FileInfo和os.PathError 。
哪个程序通常不与namenode在一个节点启动
1、NameNode正常启动，是由配置文件问题引起的。不小心把namenode节点服务器shutdown了，重启服务器后，启动hadoop发现namenode节点无法启动，50070端口无法访问，50030端口正常。
2、节点交互不同：单机模式因为不需要与其他节点交互，单机模式就不使用HDFS，也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapReduce程序的应用逻辑。
3、datanode和 tasktracker属于slave，master只有一个，而slave有多个SecondaryNameNode内存需求和NameNode在一个数量级上，所以通常secondary NameNode(运行在单独的物理机器上)和NameNode运行在不同的机器上。
4、NameNode机器宕机，将导致集群不可用，重启NameNode之后才可使用。计划需要对NameNode节点软件或硬件升级，导致集群在短时间内不可用。
以下选项中哪个程序负责hdfs数据存储
1、负责“hdfs”和“数据存储”的程序是HDFS。Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。
2、HDFS：Hadoop分布式文件系统，以高容错性来存储海量数据。 HBase：分布式键值存储系统，可以在Hadoop平台上快速查询和检索数据。 Apache Cassandra：分布式NoSQL数据库，能够快速处理大数据。
3、NameNode：NameNode是HDFS的主节点，负责管理文件系统的命名空间和元数据信息。它记录了文件和目录的层次结构、文件块的位置以及文件和目录的权限等。
hadoop中主机有多少个进程是对的
Hadoop是一个能够对大量数据进行分布式处理的软件框架，实现了Google的MapReduce编程模型和框架，能够把应用程序分割成许多的 小的工作单元，并把这些单元放到任何集群节点上执行。
NameNode还会记录HDFS中写入的操作，并将其存入一个记录文件，存放在本地文件系统中，这个记录文件被叫做Journal(日志)。3 数据节点DataNode上的每一个块(block)副本都由两个本地文件系统上的文件共同表示。
一般如果正常启动hadoop，我们可以看到以下5个进程：[root@master ~]# jps 19803 SecondaryNameNode 19994 TaskTracker 31144 Jps 19571 NameNode 19672 DataNode 19887 JobTracker 如果你少了某个，就是那个进程没有启动起来。
到此，以上就是小编对于下列选项中哪个是程序的问题就介绍到这了，希望介绍的几点解答对大家有用，有任何问题和不懂的，欢迎各位老师在评论区讨论，给我留言。
微信扫一扫打赏
