3台linux虚拟机,主机名分别为hadoop01、hadoop02和hadoop03。
1、启动hdfs集群(使用hadoop的批量启动脚本)。
/home/hadoop/app/hadoop/sbin/start-dfs.sh
2、停止hdfs集群(使用hadoop的批量启动脚本)。
/home/hadoop/app/hadoop/sbin/stop-dfs.sh
3、启动单个进程。
/home/hadoop/app/hadoop/sbin/hadoop-dae [阅读全文]
企业信息化建设
3台linux虚拟机,主机名分别为hadoop01、hadoop02和hadoop03。
1、启动hdfs集群(使用hadoop的批量启动脚本)。
/home/hadoop/app/hadoop/sbin/start-dfs.sh
2、停止hdfs集群(使用hadoop的批量启动脚本)。
/home/hadoop/app/hadoop/sbin/stop-dfs.sh
3、启动单个进程。
/home/hadoop/app/hadoop/sbin/hadoop-dae [阅读全文]
1、Hadoop。
tar -zxvf hadoop-2.9.1.tar.gz
ln -s hadoop-2.9.1 hadoop
cd home/hadoop/app/hadoop/etc/hadoop
2、修改配置文件。
(1)hadoop-env.sh。主要设置 export JAVA_HOME=/home/hadoop/app/jdk
#
# Licensed to the Apache Software Foundation (ASF) under one [阅读全文]
1、官网。http://hadoop.apache.org/
2、文档。https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html
3、介绍。
流式数据访问
运行在HDFS上的应用和普通的应用不同,需要流式访问它们的数据集。HDFS的设计中更多的考虑到了数据批处理,而不是用户交互处理。比之数据访问的低延迟问题,更关键的在于数据访问的高吞吐量。POS [阅读全文]