GetInsight組件技術及功能(七):任務調度平臺
GetInsight是慧都自主研發、應用最靈活的大數據平臺。能夠幫助您隨時找到您想要的數據,使數據得到安全、穩定和高效的管理與應用。GetInsight是企業大數據解決方案的重要組成部分,除了提供完整的大數據功能組件,我們還提供組件自定義搭配,為企業選擇滿足方案需要的大數據功能組件,使您的大數據解決方案成本降到最低,從而高品質的解決您的大數據需求問題。
了解什么是GetInsight,請點擊這里查看GetInsight的基礎介紹>>
本文主要跟大家介紹GetInsight的任務調度平臺。
任務調度平臺
任務調度平臺用于在一個工作流內以一個特定的順序運行一組工作和流程,可以實現自動調度預先設定的任務。支持調度各種類型任務,包括linux command,shell腳本,hadoop任務,spark任務,hive任務等。并且提供可視化界面對任務的執行情況進行監控。可視化界面可以查看正在執行的任務,任務的執行日志,歷史執行任務及日志等。而且具有權限管理,不同角色類型的用戶權限不一致。例如:普通用戶只能執行自己創建的任務,管理員用戶可以查看執行所有用戶創建的任務。
GetInsight任務調度平臺的特性
- 提供界面監控任務情況,而且界面友好。
- 通過簡單的設置即可創建任務的依賴。
- 創建好的任務上傳時自動識別是否有閉環,存在則給出提示,避免任務死鎖。
- 可查看已經運行、正在運行、還未運行等狀態的任務及其日志信息。
- 可支持多種任務類型,包括linux command,shell腳本,hadoop等。
- 具有用戶權限管理。
GetInsight任務調度平臺的界面和功能
訪問web界面
主要界面說明
登陸成功后進入主界面
左邊導航欄的Personal為查看當前用戶創建的project,Group為查看所屬用戶組用戶創建的project,All為查看所有用戶創建的project。當然,查看project是一回事,查看project里面的內容和執行project就需要相應的權限了。
右上角可以搜索和創建project。
上方的導航欄提供了各種選項查看相應的任務狀態。包括創建好的調度計劃,正在執行的任務,執行歷史等。
Scheduling界面
Executing界面
History界面
GetInsight任務調度平臺的應用場景
任務調度平臺不僅可以用來定時執行一些腳本,程序等。它還用于對一系列任務在指定時間按照指定順序運行,并且任務具有前后依賴的場景,尤其是對比較多的任務進行按計劃調度。比如一個ETL流程,包括數據的抽取,轉換,加載過程。這些過程是具有先后依賴的,所以任務調度平臺可以實現對ETL流程的順序調度執行及監控。
慧都工業大數據分析方案即將精益生產理論體系進行了完美的融合和應用,并對大數據總體架構進行了更細致明確的解讀,提供自主研發的大數據平臺,實現ETL、數據管理及存儲、數據建模。如下圖所示:
關于慧都大數據分析平臺
慧都大數據分析平臺「GetInsight®」升級發布,將基于企業管理駕駛艙、產品質量分析及預測、設備分析及預測等大數據模型的構建,助力企業由傳統運營模式向數字化、智能化的新模式轉型升級,抓住數據經濟的發展勢頭,提供管理效能,精準布局未來。了解更多,請聯系。
慧都大數據專業團隊為企業提供商業智能大數據平臺搭建,免費業務咨詢,定制開發等完整服務,快速、輕松、低成本將任何Hadoop集群從試用階段轉移到生產階段。
歡迎撥打慧都熱線023-68661681或咨詢慧都在線客服,我們有專業的大數據團隊,為您提供免費大數據相關業務咨詢!