hadooparchive命令

1. hadoop中命令經常含有-fs，-dfs，fs和dfs有什麼區別作用是什麼

You can see definitions of the two commands (hadoop fs & hadoop dfs) in
可以看一下hadoop的源代碼

$HADOOP_HOME/bin/hadoop
...elif [ "$COMMAND" = "datanode" ] ; then CLASS='org.apache.hadoop.hdfs.server.datanode.DataNode' HADOOP_OPTS="$HADOOP_OPTS $HADOOP_DATANODE_OPTS"elif [ "$COMMAND" = "fs" ] ; then CLASS=org.apache.hadoop.fs.FsShell HADOOP_OPTS="$HADOOP_OPTS $HADOOP_CLIENT_OPTS"elif [ "$COMMAND" = "dfs" ] ; then CLASS=org.apache.hadoop.fs.FsShell HADOOP_OPTS="$HADOOP_OPTS $HADOOP_CLIENT_OPTS"elif [ "$COMMAND" = "dfsadmin" ] ; then CLASS=org.apache.hadoop.hdfs.tools.DFSAdmin HADOOP_OPTS="$HADOOP_OPTS $HADOOP_CLIENT_OPTS"...
So, they are exactly the same.
所以，發現兩者是完全一樣的功能。

謝謝

2. cdh hadoop安裝後的啟動命令在哪個目錄

1.關閉selinux
修改/etc/selinux/config 文件
將SELINUX=enforcing改為SELINUX=disabled
重啟機器即可

2.修改bin文件的運行許可權，運行bin文件後，進入安裝cdh-manager的安裝界面
如果直接安裝，cdh-manager會去archive.cloudera.com下載安裝包，這樣會很慢，所以最好在內網搭一個下載源，做個host
echo '192.168.8.XX archive.cloudera.com' >> /etc/hosts
每一步安裝的日誌會保存在 /var/log/cloudera-manager-installer/目錄

3. linux，unix常用基本命令

1.常用指令

ls 顯示文件或目錄

-l 列出文件詳細信息l(list)

-a 列出當前目錄下所有文件及目錄，包括隱藏的a(all)

mkdir 創建目錄

-p 創建目錄，若無父目錄，則創建p(parent)

cd 切換目錄

touch 創建空文件

echo 創建帶有內容的文件。

cat 查看文件內容

cp 拷貝

mv 移動或重命名

rm 刪除文件

-r 遞歸刪除，可刪除子目錄及文件

-f 強制刪除

find 在文件系統中搜索某文件

wc 統計文本中行數、字數、字元數

grep 在文本文件中查找某個字元串

rmdir 刪除空目錄

tree 樹形結構顯示目錄，需要安裝tree包

pwd 顯示當前目錄

ln 創建鏈接文件

more、less 分頁顯示文本文件內容

head、tail 顯示文件頭、尾內容

ctrl+alt+F1 命令行全屏模式

2.系統管理命令

stat 顯示指定文件的詳細信息，比ls更詳細

who 顯示在線登陸用戶

whoami 顯示當前操作用戶

hostname 顯示主機名

uname 顯示系統信息

top 動態顯示當前耗費資源最多進程信息

ps 顯示瞬間進程狀態 ps -aux

查看目錄大小 -h /home帶有單位顯示目錄信息

df 查看磁碟大小 df -h 帶有單位顯示磁碟信息

ifconfig 查看網路情況

ping 測試網路連通

netstat 顯示網路狀態信息

man 命令不會用了，找男人 如：man ls

clear 清屏

alias 對命令重命名 如：alias showmeit="ps -aux" ，另外解除使用unaliax showmeit

kill 殺死進程，可以先用ps 或 top命令查看進程的id，然後再用kill命令殺死進程。

3.打包壓縮相關命令

tar: 打包壓縮

-c 歸檔文件

-x 壓縮文件

-z gzip壓縮文件

-j bzip2壓縮文件

-v 顯示壓縮或解壓縮過程 v(view)

-f 使用檔名

例：

tar -cvf /home/abc.tar /home/abc 只打包，不壓縮

tar -zcvf /home/abc.tar.gz /home/abc 打包，並用gzip壓縮

tar -jcvf /home/abc.tar.bz2 /home/abc 打包，並用bzip2壓縮

當然，如果想解壓縮，就直接替換上面的命令 tar -cvf / tar -zcvf / tar -jcvf 中的「c」 換成「x」 就可以了。

3.關機/重啟機器

shutdown

-r 關機重啟

-h 關機不重啟

now 立刻關機

halt 關機

reboot 重啟

4.Linux管道

將一個命令的標准輸出作為另一個命令的標准輸入。也就是把幾個命令組合起來使用，後一個命令除以前一個命令的結果。

例：grep -r "close" /home/* | more 在home目錄下所有文件中查找，包括close的文件，並分頁輸出。

5.Linux軟體包管理

dpkg(Debian Package)管理工具，軟體包名以.deb後綴。這種方法適合系統不能聯網的情況下。

比如安裝tree命令的安裝包，先將tree.deb傳到Linux系統中。再使用如下命令安裝。

sudo dpkg -i tree_1.5.3-1_i386.deb 安裝軟體

sudo dpkg -r tree 卸載軟體

註：將tree.deb傳到Linux系統中，有多種方式。VMwareTool，使用掛載方式；使用winSCP工具等；

APT（Advanced Packaging Tool）高級軟體工具。這種方法適合系統能夠連接互聯網的情況。

依然以tree為例

sudo apt-get install tree 安裝tree

sudo apt-get remove tree 卸載tree

sudo apt-get update 更新軟體

sudo apt-get upgrade

6.將.rpm文件轉為.deb文件

.rpm為RedHat使用的軟體格式。在Ubuntu下不能直接使用，所以需要轉換一下。

sudo alien abc.rpm

7.vim使用

vim三種模式：命令模式、插入模式、編輯模式。使用ESC或i或：來切換模式。

命令模式下：

:q 退出

:q! 強制退出

:wq 保存並退出

:set number 顯示行號

:set nonumber 隱藏行號

/apache 在文檔中查找apache 按n跳到下一個，shift+n上一個

yyp 復制游標所在行，並粘貼

h(左移一個字元←)、j(下一行↓)、k(上一行↑)、l(右移一個字元→)

8.用戶及用戶組管理

/etc/passwd 存儲用戶賬號

/etc/group 存儲組賬號

/etc/shadow 存儲用戶賬號的密碼

/etc/gshadow 存儲用戶組賬號的密碼

useradd 用戶名

userdel 用戶名

adser 用戶名

groupadd 組名

groupdel 組名

passwd root 給root設置密碼

/etc/profile 系統環境變數

bash_profile 用戶環境變數

.bashrc 用戶環境變數

su user 切換用戶，載入配置文件.bashrc

su - user 切換用戶，載入配置文件/etc/profile ，載入bash_profile

更改文件的用戶及用戶組

sudo chown [-R] owner[:group] {File|Directory}

例如：還以jdk-7u21-linux-i586.tar.gz為例。屬於用戶hadoop，組hadoop

要想切換此文件所屬的用戶及組。可以使用命令。

sudo chown root:rootjdk-7u21-linux-i586.tar.gz

(3)hadooparchive命令擴展閱讀

Linux是一套免費使用和自由傳播的類Unix操作系統，是一個基於POSIX和UNIX的多用戶、多任務、支持多線程和多CPU的操作系統。它能運行主要的UNIX工具軟體、應用程序和網路協議。它支持32位和64位硬體。Linux繼承了Unix以網路為核心的設計思想，是一個性能穩定的多用戶網路操作系統。

UNIX操作系統（尤尼斯），是一個強大的多用戶、多任務操作系統，支持多種處理器架構，按照操作系統的分類，屬於分時操作系統，最早由KenThompson、Dennis Ritchie和Douglas McIlroy於1969年在AT&T的貝爾實驗室開發。目前它的商標權由國際開放標准組織所擁有，只有符合單一UNIX規范的UNIX系統才能使用UNIX這個名稱，否則只能稱為類UNIX（UNIX-like）。