提供在線設(shè)置ETL作業(yè)、轉(zhuǎn)換任務(wù)的定時(shí)運(yùn)行策略,監(jiān)控任務(wù)的執(zhí)行情況
數(shù)據(jù)集成服務(wù)提供在線設(shè)置ETL作業(yè)、轉(zhuǎn)換任務(wù)的定時(shí)運(yùn)行策略,監(jiān)控任務(wù)的執(zhí)行情況,查看任務(wù)執(zhí)行日志的功能。保障多種數(shù)據(jù)格式、源頭的數(shù)據(jù)經(jīng)過清洗轉(zhuǎn)換后及時(shí)有效地送達(dá)組織的數(shù)據(jù)倉庫,強(qiáng)有力地支撐后續(xù)的數(shù)據(jù)開發(fā)、數(shù)據(jù)挖掘
數(shù)據(jù)維護(hù)人員
數(shù)據(jù)開發(fā)人員
項(xiàng)目經(jīng)理
產(chǎn)品經(jīng)理
技術(shù)經(jīng)理
架構(gòu)描述:
根據(jù)業(yè)務(wù)需求開發(fā)作業(yè)任務(wù)、轉(zhuǎn)換任務(wù)
上傳轉(zhuǎn)換任務(wù)、作業(yè)任務(wù)并設(shè)置定時(shí)調(diào)度策略
數(shù)據(jù)集成服務(wù)定時(shí)運(yùn)行任務(wù),從來源數(shù)據(jù)庫抽取數(shù)據(jù)并導(dǎo)入數(shù)據(jù)倉庫
提供B/S模式的web界面,使有瀏覽器的地方即可管理、監(jiān)控?cái)?shù)據(jù)集成任務(wù)的需求成為并提供了統(tǒng)一管理ETL作業(yè)任務(wù)、轉(zhuǎn)換的入口
提供在線設(shè)置任務(wù)定時(shí)運(yùn)行的功能,降低了調(diào)度ETL任務(wù)的難度,是調(diào)度ETL任務(wù)的好幫手
通過設(shè)置任務(wù)的日志級(jí)別(最小日志、行級(jí)日志、基本日志、詳細(xì)日志、調(diào)試日志),開發(fā)者和維護(hù)者可從日志中捕獲有用信息,進(jìn)行錯(cuò)誤定位及任務(wù)優(yōu)化
通過列表呈現(xiàn)任務(wù)的運(yùn)行狀態(tài)、下次調(diào)度時(shí)間,讓系統(tǒng)管理員一目了然地掌控集成任務(wù)
從多種維度統(tǒng)計(jì)任務(wù)的運(yùn)行情況,保障數(shù)據(jù)集成任務(wù)穩(wěn)定、有效地運(yùn)行,提高數(shù)據(jù)集成的質(zhì)量
利用平臺(tái)提供的通知管理服務(wù),用戶可定制通過短信、郵件、釘釘、微信、騰訊短信,阿里云短信,阿里云電話,華為短信等渠道接收告警信息的功能
利用平臺(tái)提供的存儲(chǔ)管理服務(wù),用戶可將任務(wù)上傳到多個(gè)存儲(chǔ)渠道進(jìn)行備災(zāi)存儲(chǔ)及享受到優(yōu)質(zhì)的上傳、下載功能
儀表盤:呈現(xiàn)作業(yè)、轉(zhuǎn)換的運(yùn)行信息。如總作業(yè)數(shù)、成功次數(shù)、失敗次數(shù)等
定時(shí)策略:管理定時(shí)任務(wù)策略配置。用于系統(tǒng)自動(dòng)掃描定時(shí)任務(wù),按時(shí)、周期性的執(zhí)行任務(wù)
任務(wù)分類:管理作業(yè)、轉(zhuǎn)換的維度
作業(yè)管理:管理作業(yè)任務(wù)清單及執(zhí)行的定時(shí)策略
轉(zhuǎn)換管理:管理轉(zhuǎn)換任務(wù)清單及執(zhí)行的定時(shí)策略
作業(yè)日志:呈現(xiàn)作業(yè)任務(wù)的執(zhí)行開始、結(jié)束時(shí)間、時(shí)長、運(yùn)行結(jié)果及日志詳情
轉(zhuǎn)換日志:呈現(xiàn)轉(zhuǎn)換任務(wù)的執(zhí)行開始、結(jié)束時(shí)間、時(shí)長、運(yùn)行結(jié)果及日志詳情
作業(yè)監(jiān)控:統(tǒng)計(jì)作業(yè)任務(wù)執(zhí)行的成功次數(shù)、失敗次數(shù)、運(yùn)行狀態(tài)、最近調(diào)度及完成時(shí)間、下次調(diào)度時(shí)間
轉(zhuǎn)換監(jiān)控:統(tǒng)計(jì)轉(zhuǎn)換任務(wù)執(zhí)行的成功次數(shù)、失敗次數(shù)、運(yùn)行狀態(tài)、最近調(diào)度及完成時(shí)間、下次調(diào)度時(shí)間