大數據解壓縮指令

1. linux解壓.gz的命令是什麼

• 解壓縮命令：

  命令格式：tar -zxvf 壓縮文件名.tar.gz。解壓縮後的文件只能放在當前的目錄。

• 解壓全部命令參考：
  

  tar _xvf file.tar 解壓 tar包

  tar -xzvf file.tar.gz 解壓tar.gz

  tar -xjvf file.tar.bz2 解壓 tar.bz2

  tar _xZvf file.tar.Z 解壓tar.Z

  unrar e file.rar 解壓rar

  unzip file.zip 解壓zip

2. cmd 解壓縮 命令

WinRAR <命令> -<開關1> -<開關N> <壓縮文件> <文件...> <@列表文件...> <解壓路徑>命令 要 WinRAR 運行的字元組合代表功能。

開關切換操作指定類型，壓縮強度，壓縮文件類型，等等的定義。

壓縮文件要處理的壓縮文件名。

文件 要處理的文件名。

列表文件 列表文件是包含要處理文件名稱的純文本。文件名應該在第一卷啟動。可以在列表文件中使用//字元後添加註釋。

(2)大數據解壓縮指令擴展閱讀：

路徑文件名1路徑文件名2 /y 復制文件1到指定的目錄為文件2，用參數/y就同時取消確認你要改寫一份現存目錄文件。

c:srv.exe ipadmin$ 復制本地c:srv.exe到對方的admin下：

1st.jpg/b+2st.txt/a 3st.jpg 將2st.txt的內容藏身到1st.jpg中生成3st.jpg新的文件，註：2st.txt文件頭要空三排，參數：/b指二進制文件，/a指ASCLL格式文件。

ipadmin$svv.exe c: 或：ipadmin$*.* 復制對方admini$共享下的srv.exe文件（所有文件）至本地C：

x 要復制的文件或目錄樹目標地址目錄名 復制文件和目錄樹，用參數/Y將不提示覆蓋相同文件用參數/e才可連目錄下的子目錄一起復制到目標地址下。

3. 大數據中的壓縮

一、壓縮分類
1、Lossless conpression(無損壓縮)
壓縮和解壓縮過程中沒有任何數據的丟失

2、Lossy conpression（有損壓縮）
JPEG，MP3，MPEG 壓縮和解壓縮過程中有任何數據的丟失

二、扮擾壓縮場景
輸入

中間

輸出

三、壓縮注意事項
CPU是否夠用，壓縮加壓縮都耗費資源

四、壓縮格式

五、壓縮比

原始文件大小1.4G
Snappy的壓縮比：50%
LZ4的壓縮比：49%
LZO的壓縮比：48%
GZIP的壓縮比：32%
BZIP2的壓縮比：28%

六、總結
1、壓縮陵陵比越高壓縮時間就越長，不同壓縮場景需要選用不同的壓縮。
2、選用壓縮就是空間與時間的選擇
3、如果是老數據/冷數廳汪旦據就採用BZIP2壓縮，如果老數據偶爾還會用的到還需考慮是否分片
4、

七、Hadoop配置Maprece的壓縮
core-site.xml

mapred-site.xml

上面配置的是Bzip2的壓縮，進入

j進行wordcount的測試

查看結果文件是帶有bz2後綴的

八、Hive的壓縮測試
1、創建表

2、載入數據

查看原表的大小

3、

新建表

查看新表的大小

4、

新建表

查看大小

5、

新建表

查看大小

以上為臨時生效壓縮，真正使用需要將具體使用哪種壓縮配置到Hive配置文件

4. tar jxvf是什麼指令

解壓指令。tar命令可以為linux的文件和目錄打包。利用tar，可以為某一特定文件創建檔案（備份文件），也可以在檔案中改變文件，或者向檔案中加入新的文件。

tar最初被用來在磁帶上創建檔案，現在，用戶可以在任何設備上創建檔案。tar代表未壓縮的tar文件。已壓縮的tar文件則附加壓縮文件的擴展名，如經過gzip壓縮後的tar文件，擴展名為「.tar.gz」。由於受到DOS8.3文件名格式的限制，常使用下列縮寫：

.tgz等價於.tar.gz

.tbz與tb2等價於.tar.bz2

.taz等價於.tar.Z

.tlz等價於.tar.lzma

.txz等價於.tar.xz

(4)大數據解壓縮指令擴展閱讀

tail指令：顯示文件末尾內容，不指定文件時，作為輸入信息進行處理，常用查看文件

語法：tail [必要參數] [選擇參數] [文件名]

常用選項-f循環讀取-n [行數]顯示行數

tar文件格式已經成為POSIX標准，最初是POSIX.1-1988，當前是POSIX.1-2001。本程序最初的設計目的是將文件備份到磁帶上（tape archive），因而得名tar。

5. linux下如何解壓和壓縮文件

• Linux下自帶了一個unzip的程序可以解壓縮文件，解壓命令是：unzip filename.zip

• 也提供了一個zip程序壓縮zip文件，命令是 zip filename.zip files ，會將files壓縮到filename.zip

6. 如何使用winrar的命令行解壓tar文件

windows中winrar命令行方式使用

在Windows系統中的文件壓縮/解壓縮工具winrar功能強大，雖然我們都習慣於用圖形界面的winrar，但是它也能在命令行方式下面使用，這在企圖讓winrar批量自動壓縮解壓縮的時候尤其有用。

它自帶的幫助也非常的全面，現在從中擇出來一些比較常用的總結一下，以免再找的時候比
較頭暈

1，最簡單的壓縮命令：
winrar a asdf.txt.rar asdf.txt
a的意思是進行壓縮動作，後面第一個參數是被壓縮後的文件名，後綴當然是rar了，最後面
的參數就是要被壓縮的文件名

2，最簡單的解壓縮命令：
winrar e asdf.txt.rar
e的意思是執行解壓縮，解壓縮的文件是後面這唯一的參數，但是這個e解壓縮是把解出來的
文件釋放到當前目錄下面，與asdf.txt.rar文件並列了，因此，更加實用的是下面的帶路徑
解壓縮。

3，帶路徑的解壓縮命令：
winrar x asdf.rar
x的意思是執行帶絕對路徑解壓動作，這會在當前文件夾下創建一個文件夾asdf，把壓縮包
里的文件、文件夾不改動結構釋放到文件asdf裡面，就像我們在winrar的圖形界面下看到的
一樣。

4，指定壓縮級別壓縮：
winrar a -m5 asdf.tr.rar asdf.tr
要被壓縮的不再是一個txt文本，而是一個文本格式的十幾M的模擬數據文件，希望能夠最大
程度的壓縮。使用壓縮參數-m5。在winrar中，執行操作是不帶前導-符號的參數，比如「a
」或「x」，而修飾這種動作的參數，使用帶前導符號「-」的參數，比如-m5。其中-m就是
指定壓縮級別的參數，壓縮級別有如下五級：
-m0 存儲 添加到壓縮文件時不壓縮文件。
-m1 最快 使用最快方式(低壓縮)
-m2 較快 使用快速壓縮方式
-m3 標准 使用標准(默認)壓縮方式
-m4 較好 使用較好壓縮方式(較好壓縮，但是慢)
-m5 最好 使用最大壓縮方式(最好的壓縮，但是最慢)
默認的是-m3級別，級別不同，對於大數據量的文本文件壓縮後的文件大小有很大的差異

5，指定壓縮後刪除原文件：
winrar a -m5 -df asdf.tr.rar asdf.tr
用參數-df指定壓縮為asdf.tr.rar壓縮文件後，刪除原文件asdf.tr，也可以是：
winrar m -m5 asdf.tr.rar asdf.tr
這個m的意思是把文件asdf.tr移動入壓縮文件asdf.tr.rar中

6，創建自解壓文件：
winrar s asdf.tr.rar
在gui界面中，創建自解壓文件是有個選項可以直接選擇的。而在命令行中，是分為兩個步
驟的，第一步是用壓縮命令進行壓縮：
winrar a -m5 -df asdf.tr.rar asdf.tr
第二步是用s命令把這個壓縮文件轉化為自解壓文件：
winrar s asdf.tr.rar
轉化後，生成了自解壓文件：asdf.tr.exe

基本上，日常使用這六條就夠

7. linux zip 壓縮命令 解壓命令 unzip

linux
zip命令的基本用法是：
zip
[參數]
[打包後的文件名]
[打包的目錄路徑]
linux
zip命令參數列表：
-a
將文件轉成ASCII模式
-F
嘗試修復損壞的壓縮文件
-h
顯示幫助界面
-m
將文件壓縮之後，刪除源文件
-n
特定字元串
不壓縮具有特定字尾字元串的文件
-o
將壓縮文件內的所有文件的最新變動時間設為壓縮時候的時間
-q
安靜模式，在壓縮的時候不顯示指令的執行過程
-r
將指定的目錄下的所有子目錄以及文件一起處理
-t
日期
把壓縮文件的最後修改日期設為指定的日期，日期格式為mmddyyyy
舉例：
將/home/Blinux/html/
這個目錄下所有文件和文件夾打包為當前目錄下的html.zip
zip
–q
–r
html.zip
/home/Blinux/html
上面的命令操作是將絕對地址的文件及文件夾進行壓縮.以下給出壓縮相對路徑目錄
比如目前在Bliux