IT常识

启动hadoop的命令行

2023-01-23 1767人阅读
威客牛网
科技信息综合服务平台

启动hadoop的命令行:

  1、start-all.sh

  启动所有的Hadoop守护进程。包括NameNode、 Secondary NameNode、DataNode、JobTracker、 TaskTrack。

  2、start-dfs.sh

  启动Hadoop HDFS守护进程NameNode、SecondaryNameNode和DataNode。

  3、hadoop-daemons.sh start namenode

  单独启动NameNode守护进程。

  4、hadoop-daemons.sh start datanode

  单独启动DataNode守护进程。

  5、hadoop-daemons.sh start secondarynamenode

  单独启动SecondaryNameNode守护进程。

  6、start-mapred.sh

  启动Hadoop MapReduce守护进程JobTracker和TaskTracker。

  7、hadoop-daemons.sh start jobtracker

  单独启动JobTracker守护进程。

  8、hadoop-daemons.sh start tasktracker

  单独启动TaskTracker守护进程。

  9、hadoop-daemons.sh stop tasktracker

  单独启动TaskTracker守护进程。

  Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streaming access)文件系统中的数据。Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,而MapReduce则为海量的数据提供了计算。

热门推荐
发布项目联系我们
分享至 取消