0 引言
數據倉庫目前在銀行、證券、電信和保險等行業(yè)得到廣泛的應用。由于數據倉庫涉及到的技能非常龐雜,且與整個企業(yè)的各個業(yè)務系統(tǒng)及各部門、各層面的員工都可能發(fā)生廣泛而深刻的聯(lián)系,這些大型企業(yè)的數據倉庫項目組織團隊也常常是非常復雜的。
如何構建高效的數據倉庫項目組織團隊,對數據倉庫項目建設的成功及后期系統(tǒng)的運營應用有至關重要的意義。數據倉庫在建設和運營的兩個階段目標不同,參與方也往往不同,對團隊人員的技能要求有很大差別,項目的組織團隊也會發(fā)生很大變化。
如何調整組織團隊適應項目生命周期進展的需要,既順利銜接,又適應變化是許多企業(yè)在實施數據倉庫項目時面臨的難題。一些企業(yè)由于疏忽了這個問題的處理,雖然在數據倉庫建設階段取得了很好的成果,順利構建起了符合最初項目目標的數據倉庫系統(tǒng),
但在后期的運營應用中卻遇到了困難,不能使花費了大量成本構建的系統(tǒng)很好地發(fā)揮出應有的價值。另外,有些數據倉庫項目在建設期間將數據集中作為自己的主要目標,在構建項目團隊時甚至將應用開發(fā)人員劃入外圍團隊,重數據采集與平臺搭建,卻忽視了應用的及時切入,從而使項目不能盡快產生效益導致失敗。
本文總結了某省級電信企業(yè)在大型數據倉庫項目組織團隊建設中探索的成果,借簽了Teredata公司的國際經驗,為構建高效的數據倉庫項目組織團隊提供了可供參考的解決方案。
1 數據倉庫建設階段項目團隊組織構建
項目團隊包括為完成項目而分派有角色和職責的人員。“團隊、角色、人員”是用來描述項目組織的三個概念,不同的角色代表不同的分工即職責,同一角色可由多個人員承擔,同一人員也可同時兼任多個不同角色。下面描述中團隊、組屬于“團隊”層面概念,用“角色”來描述團隊的具體組織架構,一個角色可能包含多名成員。
下面是某省級電信企業(yè)在數據倉庫建設期間的項目團隊組織架構,包括項目核心團隊和項目外圍團隊。項目核心團隊由數據倉庫產品廠商、數據倉庫集成商、數據倉庫建設單位的人員混編而成。核心團隊中建設單位參與人員主要是IT部門人員,建設單位項目經理也一般由IT部門派人承擔。
項目外圍團隊主要包括數據倉庫最終用戶(省公司級及分公司級業(yè)務部門人員)、系統(tǒng)維護工程師和源系統(tǒng)技術專家。項目核心團隊成員都專職參與項目,項目外圍團隊一般采取虛擬團隊模式,成員兼職參與。由于示例中,項目所建數據倉庫后續(xù)由集成商負責平臺維護和應用開發(fā),
建設單位只在每個小組中派駐了項目管理人員,在系統(tǒng)建設期間這些人員通過深入參與項目得到很好的培養(yǎng)和鍛煉,后期不只負責技術管理,還都成長為技術專家。項目建設期間的每個角色分工,都由數據倉庫廠商和集成商的人員共同承擔,使集成商得到很好的知識轉移,為后續(xù)獨立承擔運營應用任務打下堅實基礎。
由于該系統(tǒng)的硬件平臺后續(xù)采取外包維護的形式,因此將系統(tǒng)維護(數據硬件平臺維護)角色也納入外圍團隊。項目核心團隊由三個小組構成,數據模型組負責源系統(tǒng)的信息分析,概念模型、邏輯模型及物理模型設計,模型的解釋培訓,
編碼映射及元數據的管理,也負責模型的調整和維護。平臺維護組負責數據庫管理,包括數據庫性能、空間、訪問權限及安全管理,表及視圖創(chuàng)建;與源系統(tǒng)數據文件接口的實現(xiàn)及維護,保證數據文件及時、完整、正確傳送,并對接口機進行維護;
ETL程序開發(fā)、測試、維護及調度管理;數據質量管理與數據問題跟蹤處理等。應用開發(fā)維護組又下分報表多維分析開發(fā)、專題應用數據挖掘開發(fā)及即席查詢開發(fā)三個小組。應用開發(fā)維護組負責應用需求分析管理,應用開發(fā)、測試、維護,應用推廣培訓,應用門戶網站(Portal)的開發(fā)維護,應用服務器的維護等。
這種組織模式,結合數據倉庫各項工作不同的技能要求,分工非常明確,從系統(tǒng)建設階段就考慮到了后期運營的承接,并從一開始就特別重視數據倉庫的應用。在實施數據倉庫應用時,也常將某個應用獨立成一個項目進行運作,
數據倉庫核心團隊中應用開發(fā)人員與外圍團隊中業(yè)務部門的業(yè)務專家密切配合,甚至階段性地全職參與該項應用的開發(fā)工作,并對分析成果投入應用的全程進行跟蹤和管控,從而使應用能切實發(fā)揮效用,產生價值。外圍團隊不像核心團隊一樣是個嚴格按項目管理來運作的項目組,而是一個虛擬團隊。
團隊成員的主要職責往往不是參與數據倉庫建設,只是在需要的時候聽從召喚,階段性參與到相關工作中來,或將其中的某些工作納入到已有工作職責中成為自己工作的一部分。系統(tǒng)維護角色主要負責數據倉庫硬件平臺,包括主機、磁帶庫等的維護及數據備份與恢復,他們常還兼任其他系統(tǒng)硬件平臺的維護。
源系統(tǒng)專家配合數據倉庫接口文件的抽取和數據模型的信息調研等工作。分公司IT部門負責在分公司層面對數據倉庫應用的承接,包括分公司業(yè)務系統(tǒng)與數據倉庫接口的維護,與分公司業(yè)務系統(tǒng)相關的數據質量管理及數據問題處理,分公司數據集市維護,應用需求分析與應用開發(fā)、維護等。各類業(yè)務部門(本示例中主要是市場部)是數據倉庫的最終用戶,
他們負責應用需求的發(fā)起與分析成果的應用,使之產生價值,并對應用效果進行評估。
2 數據倉庫建設團隊向運營團隊的演進
數據倉庫項目區(qū)別于傳統(tǒng)的事務型IT系統(tǒng)建設項目。傳統(tǒng)IT項目系統(tǒng)建設完成后,項目團隊就解散了,留下少量人員做系統(tǒng)的日常運維。而數據倉庫系統(tǒng)平臺建設完成后,更大量的報表及分析應用開發(fā)工作也需要以項目的形式進行運作,項目團隊可能會隨著應用需求的拓展而不斷膨脹,這也給團隊組織架構帶來挑戰(zhàn)。
數據倉庫系統(tǒng)平臺建設驗收后就轉入運營階段,這時項目團隊會發(fā)生一系列顯著變化,主要是核心團隊會發(fā)生變化。數據倉庫廠商的人員會撤離項目組,小型項目由建設單位,大型項目由集成商和建設單位承擔起數據倉庫平臺的日常運營應用工作。
工作內容也會有很大變化,模型設計、ETL開發(fā)的工作量會大為減少,相反應用由星星之火漸成燎原之勢,應用需求會應接不暇;且隨著應用的拓展和深化,各類數據問題也會充分暴露,接踵而至。數據倉庫項目團隊必須及時調整以適應這些變化。
如何明確人員職責分工,打造核心團隊,建立起適合長期運營,并以項目的形式開展應用開發(fā)工作的高效穩(wěn)定的團隊組織架構?本文的解決辦法是根據關鍵工作流程梳理出關鍵環(huán)節(jié),根據關鍵環(huán)節(jié)明確關鍵功能點,對應設置關鍵角色和組織架構。
如某省級電信企業(yè),梳理出了3個關鍵流程和7類關鍵角色。三個關鍵流程分別是:數據流、任務流(應用需求)和問題流。數據流保障數據的完整、及時、準確,貫穿數據從源系統(tǒng)到應用展現(xiàn)的整個流程,在流程的各個環(huán)節(jié)中,
模型管理、運維支撐、應用支撐、體系管理和質量管理等幾類關鍵角色分別承擔了相應職責。任務流保障應用需求(任務)的合理產生和合格落實,使應用開發(fā)符合范圍、進度、質量和優(yōu)化(持續(xù)生效)的要求,任務流貫穿于應用開發(fā)的整個生命周期。
在流程的各個環(huán)節(jié)中,需求管理、模型管理、應用支撐、專題支撐、運維支撐、體系管理和質量管理等幾類關鍵角色分別承擔了相應職責。問題流保障問題及時、準確、全面地解決,它可以是和數據倉庫工作相關的任何問題,包括數據質量問題。
問題流貫穿于問題由產生到解決的整個生命周期。在流程的各個環(huán)節(jié)中,質量管理、模型管理、應用支撐、專題支撐、運維支撐和體系管理等幾類關鍵角色分別承擔了相應職責。根據以上關鍵流程抽象出的關鍵角色,形成了以下適應數據倉庫長期運營的矩陣式項目核心團隊組織架構。
在數據倉庫運營階段,數據倉庫所屬企業(yè)的IT部門專門有一個分支機構負責數據倉庫的運營,由如表1所示的角色構成。以上成員分別滲透到集成商的各項工作中,對應各關鍵角色,發(fā)揮專家顧問和項目管理的作用。
該企業(yè)數據倉庫的容量達到83TB,由以上建設單位及集成商構成的44人團隊負責日常運營和應用,其中技術支撐團隊38人,核心成員8人分別占據7類關鍵角色,支撐起整個團隊穩(wěn)定高效的運轉。團隊組織中7類關鍵角色的職責分工、技能要求及職業(yè)發(fā)展規(guī)劃。
項目團隊組織架構在團隊內明確了關鍵角色,利于打造一支穩(wěn)定稱職的核心數據倉庫運營支撐隊伍,并通過這些關鍵角色保證數據倉庫的關鍵工作流程得到高效落實。通過需求管理,加強與客戶的溝通和需求的統(tǒng)籌把控,保證團隊人力資源發(fā)揮最大價值;
通過需求管理、模型管理對應用及中間層數據模型進行統(tǒng)一規(guī)劃,提升應用開發(fā)成果的可重用性;通過質量管理,加強對問題的跟蹤解決和客戶申告的及時處理,提升客戶滿意度,并讓各環(huán)節(jié)、各崗位協(xié)同解決數據質量問題,全員對數據質量問題負責,更適合數據質量問題的解決特點。
應用開發(fā)與ETL開發(fā)需要的技能相同,應用人員可參與ETL開發(fā),應用開發(fā)從ETL開發(fā)開始,貫通各環(huán)節(jié),便于開發(fā)的項目管理及應用的維護管理,并可根據需要動態(tài)調節(jié)ETL開發(fā)資源。運維與開發(fā)的工作性質有很大區(qū)別,將ETL運維與開發(fā)分開,運維只需要較低的技能,ETL運維人員可同時兼接口運維等工作,便于工作管理、提升效率、保證質量。
將應用門戶維護、Web類應用開發(fā)等需要專門技能的工作納入應用支撐組統(tǒng)一管理,相關資源共享,并保證各類應用的統(tǒng)籌規(guī)劃部署。應用及專題支撐開發(fā)采用項目經理制,各成員都有機會成為負責具體應用項目的項目經理,充分挖掘人員的潛力,
且隨著應用項目的拓展不會導致組織機構膨脹。通過以上調整,數據倉庫運營團隊面貌煥然一新,成員的工作積極性被極大激發(fā),潛能被充分挖掘,團隊更加穩(wěn)定,流程更加順暢,工作更為高效,數據倉庫價值得到更好發(fā)揮。
3 結語
本文為大型企業(yè)數據倉庫建設及運營階段項目團隊的構建提供了可參考的解決方案。其特點是,建設階段的項目團隊由項目發(fā)起方、數據倉庫廠商、集成商混編而成,明確各自定位,注重知識轉移,從系統(tǒng)建設階段就考慮到了后期運營的承接,并從一開始就特別重視數據倉庫的應用;
在運營階段,適時進行團隊組織的調整,以適應形勢變化,經歷了應用急劇膨脹的考驗,通過摸索演進,最終找到了一種高效的、穩(wěn)定的適應長期運營的數據倉庫項目團隊組織構建模式。該模式根據關鍵工作流程梳理出關鍵環(huán)節(jié),根據關鍵環(huán)節(jié)明確關鍵功能點,對應設置關鍵角色和組織架構。
通過組織架構調整后,團隊面貌煥然一新,工作效率極大提高,客戶滿意度顯著提升,使數據倉庫系統(tǒng)價值得到更好發(fā)揮。
溫馨提示:因考試政策、內容不斷變化與調整,信管網網站提供的以上信息僅供參考,如有異議,請以權威部門公布的內容為準!
信管網致力于為廣大信管從業(yè)人員、愛好者、大學生提供專業(yè)、高質量的課程和服務,解決其考試證書、技能提升和就業(yè)的需求。
信管網軟考課程由信管網依托10年專業(yè)軟考教研傾力打造,官方教材參編作者和資深講師坐鎮(zhèn),通過深研歷年考試出題規(guī)律與考試大綱,深挖核心知識與高頻考點,為學員考試保駕護航。面授、直播&錄播,多種班型靈活學習,滿足不同學員考證需求,降低課程學習難度,使學習效果事半功倍。
發(fā)表評論 查看完整評論 | |