『壹』 阿里雲的大數據平台是幹嘛的怎麼用有什麼價值
建議你用模板建站系統做網站,完全可以自己動手製作網站。
有100多套內網站模板可以選擇,操作容上和WORD差不多,管理和維護很方便,有學習視頻,一般看半天就會做了。
速成網站-國際版(5G網頁空間,不限流量,不需要備案,會打字就可以做網站,可先試用)。年費是160元。
可以找咱們,現在在線。
『貳』 大數據阿里雲工具之DataWorks(二)
本文主要介紹dataworks的運維中心、智能監控
一.運維中心
運維中心在是dataworks當中的任務調度模塊,我們書寫好業務流程後,會把業務流程進行提交,提交後的業務流程就會在運維中心進行顯示,會按照你設置節點的調度周期開始調度任務。
ps:如果是雙環境任務的話,運維中心也會有兩個,可在DAG圖裡面查看當前環境是開發還是生產。
運維大屏
顯示 的是已有的任務調度情況,包括新增的任務,失敗的、正在運行中的都可以看到
實時任務運維
需要實時計算引擎,這里暫時還沒有,以後給大家介紹
周期任務運維
離線任務節點信息,我們配置好離線任務發布後就是在這里進行調度維護的,如果是雙環境的話,開發環境提交的任務節點就是在開發運維環境,在編輯節點的時候點擊發布按鈕才是提交到生產環境。
周期任務運維分為四個功能 周期任務、周期實例、補數據實例、測試實例
周期任務:就是可以查看到我們提交的r離線任務節點,在這里可以查看到我們離線任務的DAG圖,血緣關系,並可以添加報警信息,進行測試,和補數據、凍結節點、下線節點等操作
周期實例:會按照調度周期,每天生成實例,如果是日調度,那麼在周期實例里,每天都會有一個實例,如果是小時那麼一天會有24個實例,可以選擇日期進行查看。
補數據實例:補數據就是針對我們以前缺失的數據進行補數據,可以選擇當前節點和當前及下節點。
測試實例:就是我們再周期任務里點擊測試生成的實例,每一次節點的測試都會生成測試實例,在這里進行觀看,可以看到實例的運行任務和日誌等情況
手動任務運維:
區別我們的周期任務,我們的周期任務都有調度周期,但是手動任務是沒有的,例如某些任務需要臨時補救的操作或者數據調整,只是用一次或者幾次而且調度時間都不相同的話,可以創建手動任務來進行調度。
智能監控:
智能監控這邊主要是為了監控我們的調度任務節點一些運行情況
主要使用到的還是添加一些報警信息,在報警信息裡面可以添加我們的報警郵件和簡訊,也可以把報警信息添加到我們的釘釘群里
規則管理:主要就是我們數據質量的規則設定,詳情請看上一篇文章
二、總結
這一片寫的相對減少,主要是網不太好,一會斷一會斷的,只要掌握這些操作,至少你使用阿里雲大數據服務操作基本沒什麼問題,從數據的採集到數據加工到數據同步,任務的調度、任務監控這一系列的文章里都有介紹,如有什麼描述不清楚的還望多多批評指正,如有問題,請評論交流 謝謝瀏覽