A. kettle定時執行任務設置
就是後台要有這個進程才可以,如果是通過界面執行的話,要點擊那個綠色的三角,如果是命令行啟動,後台要有這個進程。不推薦使用kettle裡面的自動執行,使用操作系統的定時執行要比這個穩定的多。windows下使用定時任務計劃,linux下使用crontab
B. 電腦開機出現這種情況:啟動修復 您的計算機無法啟動 啟動修復正在檢查系統問題…
C. 電腦無法啟動怎麼辦,出現啟動修復但修復不了怎麼辦
電腦開機一直卡在正在准備自動修復主要是電腦的系統文件損壞了,導致電腦不能不正常啟動,所以開機就會顯示自動修復。
出現這個情況基本是有4個主要的情況導致的:
1、電腦誤刪除或者是破壞了系統文件。 那麼需要重新安裝系統。
2、可能是安裝的軟體或者是插件跟系統兼容性沖突導致的。 可以強制關機3次,然後重新啟動電腦會出現恢復界面——選擇安全模式——然後電腦會重新啟動進去安全模式,進去安全模式之後,打開應用和功能,把最近安裝軟體或者插件刪除了
3、可能是系統遭受惡意軟體或電腦病毒,中病毒導致系統出故障。 強制關機3次,然後重新啟動電腦會出現恢復界面——選擇安全模式——然後電腦會重新啟動進去安全模式,進去安全模式之後,使用安全軟體進行殺毒。
4、可能是磁碟問題。需要檢測磁碟,如果硬碟有問題,更換一個硬碟即可。
D. kettle運行spoon.bat彈出命令行後一直無反應
1.Kettle無法啟動解決方法:
估計是jdk環境變數沒配置好,網路、qq找了很多地方,都不行,終於在一個博客里發現了解決方法:
只要修改一下spoon.bat里內存配置:
if "%PENTAHO_DI_java_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms2058m" "-Xmx1024m" "-XX:MaxPermSize=256m"
改為
if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms512m" "-Xmx512m" "-XX:MaxPermSize=256m"
修改之後保存,重新啟動spoon.bat,奇跡出現了,Kettle真的啟動成功了!
2.Kettle無法啟動原因分析:
在QQ群里,有大神問:是否電腦硬體配置太低了?我:我的可是華碩i5CPU,4G大內存啊好不?大神:人家玩Kettle的都3位數內存哦,我:(⊙﹏⊙)b。。。
網路一下,還真是如此,理論上主要有兩種原因:
1) 參數中-Xms的值大於-Xmx,或者-XX:PermSize的值大於-XX:MaxPermSize;
2) -Xmx的值和-XX:MaxPermSize的總和超過了JVM內存的最大限制,比如當前操作系統最大內存限制,或者實際的物理內存等等。
看起來,是由於本機內存被佔用過多,而JVM參數設置過大,導致JVM無法啟動,故spoon.bat運行後,Kettle無法啟動啊,額,玩大數據分析還得要銀子換電腦嗎?
3.JVM(java虛擬機)相關概念
在排查kettle問題時,用到了幾個概念,都貼在這里吧。
1)堆(Heap)和非堆(Non-heap)內存
JVM主要管理兩種類型的內存:堆和非堆。
簡單來說堆就是Java代碼可及的內存,是留給開發人員使用的;非堆就是JVM留給自己用的,
2)JVM的幾個參數:
-Xms2058mJVM初始分配的堆內存
-Xmx1024mJVM最大允許分配的堆內存,按需分配
-XX:PermSize=128MJVM初始分配的非堆內存
-XX:MaxPermSize=256MJVM最大允許分配的非堆內存,按需分配
3)Xms Xmx PermSize MaxPermSize 區別
E. win7開機提示spoon.sys損壞無法正常啟動系統怎麼辦
win7開機spoon.sys損壞解決方法:
1、重新啟動系統,按下F8鍵調出高級啟動選項,選擇「最近一次正確配置」,按回車進入;
2、如果能進入系統,則把近期安裝的殺毒軟體卸載即可;
3、如果不能進入系統,重啟系統時按下F8,選擇安全模式進入,卸載殺毒軟體;
4、如果不能進入安全模式,再重啟系統按下F8,選擇「帶命令提示符的安全模式」進入;
5、輸入del c:\windows\system32\Drivers\spoon.sys,按回車執行刪除spoon.sys文件,c為系統盤符,部分用戶為d或e;
6、上述步驟均無效,那麼進行系統恢復或重裝系統操作。
F. kettle教程是什麼
kettle 是純 java 開發,開源的 ETL工具,用於資料庫間的數據遷移 。可以在 Linux、windows、unix 中運行。有圖形界面,也有命令腳本還可以二次開發。
kettle 的官網是https://community.hitachivantara.com/docs/DOC-1009855,github地址是https://github.com/pentaho/pentaho-kettle。
安裝。
這邊以 windows 下的配置為例,linux 下配置類似。
jdk 安裝及配置環境變數。
由於 kettle 是基於 java 的,因此需要安裝 java 環境,並配置 JAVA_HOME 環境變數。
建議安裝 JDK1.8 及以上,7.0以後版本的 kettle 不支持低版本 JDK。
下載 kettle。
從 官網 下載 kettle ,解壓到本地即可。
下載相應的資料庫驅動。
由於 kettle 需要連接資料庫,因此需要下載對應的資料庫驅動。
例如 MySQL 資料庫需要下載 mysql-connector-java.jar,oracle 資料庫需要下載 ojdbc.jar。下載完成後,將 jar 放入 kettle 解壓後路徑的 lib 文件夾中即可。
注意:本文基於 pdi-ce-7.0.0.0-25 版本進行介紹,低版本可能有區別。
啟動。
雙擊 Spoon.bat 就能啟動 kettle 。
轉換。
轉換包括一個或多個步驟,步驟之間通過跳(hop)來連接。跳定義了一個單向通道,允許數據從一個步驟流向另一個步驟。在Kettle中,數據的單位是行,數據流就是數據行從一個步驟到另一個步驟的移動。
1、打開 kettle,點擊 文件->新建->轉換。
2、在左邊 DB 連接處點擊新建。
3、根據提示配置資料庫,配置完成後可以點擊測試進行驗證,這邊以 MySQL 為例。
4、在左側找到表輸入(核心對象->輸入->表輸入),拖到右方。
5、雙擊右側表輸入,進行配置,選擇數據源,並輸入 SQL。可以點擊預覽進行預覽數據。
6、在左側找到插入/更新(核心對象->輸出->插入/更新),拖到右方。
7、按住 Shift 鍵,把表輸入和插入/更新用線連接起來。
8、雙擊插入/更新進行配置。
9、點擊運行,就可以運行這一個轉換。
10、運行結束後,我們可以在下方看到運行結果,其中有日誌,數據預覽等,我們可以看到一共讀取了多少條數據,插入更新了多少數據等等。
這樣就完成了一個最簡單的轉換,從一個表取數據,插入更新到另一個表。
作業。
如果想要定時運行這個轉換,那麼就要用到作業。
1、新建一個作業。
2、從左側依次拖動 START 、轉換、成功到右側,並用線連接起來。
3、雙擊 START,可以配置作業的運行間隔,這邊配置了每小時運行一次。
4、雙擊轉換,選擇之前新建的那個轉換。
5、點擊運行,就能運行這次作業,點擊停止就能停止。在下方執行結果,可以看到運行的日誌。
這樣就完成了一個最簡單的作業,每隔1小時,將源表的數據遷移到目標表。
總結:kettle 是一個非常強大的 ETL 工具,通過圖形化界面的配置,可以實現數據遷移,並不用開發代碼。
通過它的作業,kettle 能自動地運行轉換。