數據倉庫工程師的主要職責(27篇)_第1頁
數據倉庫工程師的主要職責(27篇)_第2頁
數據倉庫工程師的主要職責(27篇)_第3頁
數據倉庫工程師的主要職責(27篇)_第4頁
數據倉庫工程師的主要職責(27篇)_第5頁
已閱讀5頁,還剩16頁未讀 繼續免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

第數據倉庫工程師的主要職責(27篇)

數據倉庫工程師的主要職責(精選27篇)

數據倉庫工程師的主要職責篇1

職責:

1、負責制定數據倉庫平臺技術體系架構、數據架構及規范;

2、負責設計和實施公司業務數據的實時/離線數據ETL架構方案;

3、負責調度架構設計與開發;

4、負責數據倉庫平臺運維以及日常數據運營等管理;

5、負責關鍵技術攻關;

任職要求:

1、5年以上數據倉庫項目開發經驗,參與過數據倉庫架構設計,對ETL開發流程、調度架構有深入理解;

2、精通mysql、oralce、greenplum等至少一種數據庫,豐富的SQL性能調優經驗;

3、熟練使用Java、Shell、Python、Perl等至少一種腳本語言;

4、熟悉數據治理理論,數據質量、元數據管理流程和方法;

5、了解Hadoop/Hive/HBase/Spark/Storm等技術及其生態圈;

6、溝通能力好、責任心強,具有良好的團隊合作精神和敬業精神;

數據倉庫工程師的主要職責篇2

職責:

1、負責ETL開發、作業調度和數據平臺建設

2、負責數據倉庫的設計、開發和優化,建立結構層次合理、靈活可擴展的數據倉庫

3、設計并研發BI分析相關的數據產品

4、結合對數據的理解和業務需求,對數據進行整理、分析和挖掘

任職要求

1、計算機相關專業本科及以上學歷,有2年以上數據倉庫、ETL工作經驗

2、有海量數據處理、ETL及作業調度優化、數據倉庫建模等經驗

3、熟悉Linu_、SQL、Python或Java、Shell腳本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大數據技術使用經驗

4、邏輯清晰,對數據敏感,深入了解業務,具備自己獨特的想法并能提出合理的建議

數據倉庫工程師的主要職責篇3

職責:

1.負責企業級數據倉庫設計、規劃、建設、實施、管理,數據倉庫架構設計與數據開發,創建數據倉庫、數據集市

2.熟悉數據倉庫領域知識,從架構和技術層面參與建設數據倉庫,包括元數據管理、數據質量、主數據管理、性能優化和調優。

3.負責數據倉庫平臺相關數據管理工作,如研發規范、質量規范、保障規范的制定與推動實施落地

4.配合和協助數據分析/數據挖掘形成底層/中間層的業務邏輯切片

任職資格:

1.本科或碩士以上學歷,計算機工程相關專業

2.熟悉大數據相關技術能力(Hadoop/MapReduce/Hive/Hbase等),熟練進行數倉Hive建設和軟件架構,較強的數據抽象能力

3.精通SQL,具備海量數據處理和Hive/Spark性能調優經驗,3年以上大規模分布式數據倉庫建設經驗

4.熟練使用Druid/Kylin之一進行數據挖掘模型設計,熟練掌握Java/Scala之一,具備良好的coding素養和習慣,了解腳本語言,如Python、Shell等

5.強烈的責任心,工作態度積極主動,有較好的團隊精神和溝通能力,工作細致認真

數據倉庫工程師的主要職責篇4

職責:

1.建設公司級數據倉庫,并根據業務變化持續迭代和優化;

2.對業務數據進行梳理和抽象,建設數據倉庫的數據模型;

3.對業務數據進行采集、清洗、轉換和存儲;

4.支撐BI、用戶數據、用戶運營、用戶畫像、房源數據、推薦系統等核心數據平臺產品;

5.研究大數據前沿技術,不斷持續優化大數據平臺,為業務提供價值。

任職資格:

1.本科及以上計算機、統計學、數據庫、機器學習等相關專業,5年以上數據相關工作;

2.對業務數據有敏銳的理解能力,并能快速梳理和分析業務數據;

3.熟練掌握SQL語言、熟悉MySQL,對Shell、Java(主要開發語言)、Python編程非常熟悉;

4.熟悉常用的ETL技術和原則;精通數據倉庫數據庫設計規范和實操;

5.熟悉Hadoop、Hive、HBase、Spark、Storm等開源平臺者優先;

6.具有較強的分析和解決問題的能力,良好的學習能力和團隊合作精神,追求價值實現,認同目標管理和敏捷。

數據倉庫工程師的主要職責篇5

職責:

1、稅務系統數據按照甲方需求的分析、加工、查詢、統計等;

2、BIEE報表前臺展現工具的基礎應用;

3、后臺ORACLE數據庫庫表結構的維護優化;

4、ETL工具(ODI)的基礎使用;

崗位要求

1、計算機相關專業本科學歷,或有一年以上數據庫相關工作經驗專科學歷;

2、較好的溝通、學習能力和團隊協作精神;

3、熟練使用ORACLE等數據庫相關技術;

4、熟練掌握PL/SQL等開發工具;

5、具有較強的問題分析和解決能力,能獨立完成需求分析;

6、有大型數據庫使用維護經驗者優先;

7、責任心強,有較好的敬業精神,工作積極,有較強的自主學習能力;

8、有數據庫工作經驗者優先;

9、有稅務行業、財務行業開發管理經驗者優先;我們提供雙休、生日禮金、五險一金以及帶薪年假,發展前景廣闊。

數據倉庫工程師的主要職責篇6

1.做好車間各機臺的上下模工作,對車間機臺所生產的模具進行監控,防止人為因素的破壞;

2.負責機臺工藝調試,產品質量控制;

3.負責模具潤滑(保養)及生產運營情況;

4.對設備運營情況進行觀察,防止設備故障的產生;

5.下班前檢查工具是否齊全,是否規范到位;

6.對不能正常生產的設備和模具要做好記錄,上報維修;

7.接到轉模通知單后要迅速轉模,嚴禁拖拖拉拉;

8.負責機臺作業員操作技能培訓,作業試指導;

9.協助機臺的6S管理工作;

10.認真填寫作業員交接班記錄,面對面和下一班技術員相互交流,傳遞信息;

11.負責設備狀況的標識工作,及機臺各類表單成型參數,設備模具的點檢記錄;

12.完成上級交代的其它工作.

數據倉庫工程師的主要職責篇7

職責:

1、負責公司oracle、DB2數據庫及相關系統維護管理、性能調優工作;

2、參與公司數據分析產品的大數據基礎架構設計與優化,設計數據整體架構及其細節;

3、負責公司各個項目的數據庫系統部署方案的計劃、設計和實施指導,參與項目的數據庫設計;

4、指導各個實施項目成員,對數據庫語句進行優化,解決性能問題;

5、負責研發及使用新技術和新架構滿足日益增長的數據需求;

6、負責數據庫的日常維護,包括:日常維護,性能監控,性能優化,安全管理等。

任職要求:

1.計算機相關專業大學本科及以上學歷,具備三年以上大型Oracle、DB2數據庫DBA或數據倉庫架構設計經驗,精通數據庫管理與優化;

2.精通ORACLE、DB2等主流數據庫的管理,要求具備有較強的故障定位和問題分析、解決能力;具備一年以上Hadoop、GreenPlum、NoSQL等大數據技術平臺實施、部署、優化經驗;

3.豐富的數據庫維護經驗,擅于分析運行瓶頸,并提供改進方案;精通數據庫的性能優化、SQL調優技術,對高并發數據庫的鎖和事務隔離問題有深入理解;精通數據庫容量規劃和分表設計方法,有海量數據庫設計和支持經驗;

4.熟悉UNI_/LINU_等主流OS平臺,理解操作系統原理,具備腳本編寫能力(SHELL/PERL/PYTHON),并善于利用腳本解決問題;

5.熟悉RAC/PureScale/GoldenGate/CDC等高可用技術;

6.善于數據庫架構的規劃,能設計主機、存儲、數據庫的整體方案;

7.具備醫療從業資格者優先;

8.工作認真,責任心強,良好的溝通技能、團隊合作能力。

數據倉庫工程師的主要職責篇8

職責:

1、負責Linu_服務器、Windows服務器,MySQL數據庫服務器日常運維、優化等工作

2、負責處理系統日常變更,控制突發情況,對疑難問題進行分析并解決,以及各類故障和事務的應急響應和技術支持

3、監控服務器的運行狀態、系統性能;保障產品服務器的穩定性、可用性以及安全性

4、負責服務器及設備的安裝、調試、維護、監控、備份等日常工作

5、負責對服務器性能監測數據以及故障日志等的分析,協助研發進行相關問題查找

6、負責辦公設備的日常維護及管理,技術檔案維護

任職條件:

1、具備較強的服務意識和優秀的服務態度。

2、具有良好的獨立分析問題與迅速解決問題的能力;性格沉穩,吃苦耐勞,良好的口頭和書面表達能力,善于與人溝通。

3、具有1年以上相關數據中心IT基礎設施運維經驗,具備大規模集群的系統運維、服務監控分析、故障排查及緊急情況下的應急處理能力。

4、熟悉Linu_、Windows操作系統體系結構,精通Linu_操作系統管理,故障分析處理;熟悉常用數據庫(如Oracle,MySQL,redis等)和中間件技術(如Ngni_,Tomcat等)優先。

5、熟悉Shell/Perl/Python一種及以上的腳本語言以及grep、sed和awk工具。

6、熟悉ELK、zabbi_等自動化運維工具,有自動化運維經驗者優先。

7、有負載均衡技術、應用集群技術、數據庫高可用和讀寫分離、分布式存儲維護經驗者優先。

數據倉庫工程師的主要職責篇9

職責:

1根據產品規劃或者項目要求,獨立完成業務需求和功能需求。

2向開發工程師提供咨詢、指導、解釋業務需求。

3整理、分析和引導客戶需求,提出解決方案、按時交付和提高客戶滿意度。

4高質量完成上級安排的工作任務。

任職要求:

1統招本科或以上學歷,2年以上產品需求開發、需求管理工作經驗;

2熟練掌握A_ure\Visio\PowerPoint\E_cel\Word\思維導圖等工具,善于溝通。

3掌握需求分析方法,熟悉需求管理和研發過程管理,

4具備優秀的邏輯思維能力和文檔編寫能力;

5郵政行業、快遞行業和金融行業優先。

6計算機相關專業優先,如大數據專業、軟件工程專業、信息管理專業;了解基本SQL語法優先。

數據倉庫工程師的主要職責篇10

職責:

1、根據游戲類型,制定服務器端網絡框架/模型,核心代碼編寫;

2、確保游戲開發時間和質量;

3、解決游戲開發、線上問題;能夠與運維溝通,保持游戲服務器穩定;

4、實時了解服務器瓶頸,能結合游戲性能及穩定性進行調優;

任職要求:

1、熱愛編程,熱愛游戲,有游戲開發經驗或豐富的游戲體驗;

2、熟悉C++,熟悉Shell、Python等至少一種腳本,熟悉TCP/IP協議;

3、熟練使用MySQL,能夠編寫高效的SQL語句;

4、熟練閱讀英文技術文檔,較強的分析解決問題能力。

數據倉庫工程師的主要職責篇11

1,參與上市公司新組建團隊起步人工智能醫藥病理項目;

2,負責分析醫藥病理圖像,設計優化算法模型;

3,負責產品優化,持續改進算法;

細分方向1:算法方向:算法設計模型調優改進;

細分方向2:圖像方向:圖像處理;

隨著團隊人員增加,要求會越來越高,目前起步團隊基本組建完成,以后候選人的考量將會是全方面的

數據倉庫工程師的主要職責篇12

1.承擔智慧城市頂層設計和規劃工作;

2.承擔行業信息化總體規劃、信息系統總體方案設計、可行性研究等工作,并進行跟蹤溝通、方案宣講、現場調研、和技術交流;

3.承擔用戶需求分析與解決方案的編制和設計工作;

4.承擔智慧城市的數據標準/接口等的制定;

數據倉庫工程師的主要職責篇13

1、主要負責項目管理包括建筑工程測量、公路工程測量、橋梁工程測量、隧道工程測量等測量工作;

2、參與項目管理與作業包括項目方案編寫、預算編寫、外業作業、內頁數據處理、報告編寫等;

3、領導交辦的其他工作。

數據倉庫工程師的主要職責篇14

職責:

1、參與公司產品數據庫設計開發和評審;

2、對公司產品的數據庫相關問題進行技術支持;

3、對數據庫腳本進行代碼審查;

4、輸出數據庫相關技能培訓,提升團隊數據庫設計和開發技能。

任職要求:

1、計算機本科及以上相關專業畢業,熟悉linu_操作系統;

2、精通主流的數據庫產品oracle、mysql;熟悉DB2和MSQL-Server;

3、精通SQL腳本的編寫,有豐富的數據庫管理、運維調優經驗,能獨立完DBA管理任務;

4、具有團隊合作精神,抗壓能力;

5、主動學習,對新技術鉆研有興趣。

數據倉庫工程師的主要職責篇15

職責

1、負責數據庫及操作系統的日常維護,數據庫性能監控及優化,故障診斷和排除;

2、制定并實施數據備份、恢復、復制計劃,以及數據庫的安全管理、用戶管理;

3、負責數據庫項目的安裝、部署、維護等工作;

4、完成領導安排的其他工作。

任職資格

1、計算機,統計,數據,電子信息等相關專業畢業,3年以上工作經驗。(必須211高校統招畢業。)

2、精通python,熟悉mysql/mariadb,sqlserver。

3、能對mysql/mariadb、sqlsever集群環境進行安裝配置、性能優化,故障處理。

4、能熟練對數據庫進行備份恢復、數據遷移。

5、具有數據庫相關認證證書的優先。

數據倉庫工程師的主要職責篇16

1、參與數據平臺相關應用項目的ETL設計、開發、維護工作;

2、參與ETL調度架構的開發優化工作;

4、與團隊內部以及需求部門進行有效溝通,跟進項目進度以及解決相關數據問題;

5、完成上級主管分配的工作任務,并達到公司制度規定的考核要求;

6、參與Informatica服務工作,包括Informatica性能調優,服務的安裝發布,及Informatica工具的相關培訓。

數據倉庫工程師的主要職責篇17

職責:

1、參與據倉庫的長期架構規劃,與數據開發,建設共享大數據平臺;

2、負責數據平臺相關數據管理工作,如研發規范、質量規范、保障規范的制定與推動實施落地;

3、負責來自業務團隊數據需求的研發支撐;

4、大規模數據挖掘和機器學習算法的實現和維護;

5、在線和離線海量數據分析平臺的開發;

6、負責數據倉庫的建設和維護,包括需求調研分析、軟件規劃、概念模型、設計邏輯、物理模型、數據處理(抽取、清洗、轉化)、項目實施管控等;

7、負責制定數據接入和采集規范制定。

任職要求:

1、從事數據倉庫領域工作2年以上;

2、熟悉數據建模、ETL設計與應用、報表開發等,并有實際模型設計及ETL開發經驗;具有良好的編程習慣和文檔編寫習慣;

3、熟悉數據倉庫領域知識和管理技能,包括但不局限于:元數據管理、數據質量、性能調優等;

4、掌握大型數據庫開發技術,如Oracle、Teradata、DB2、Mysql等等掌握至少其中一種,靈活運用SQL實現海量數據ETL加工處理;

5、了解大數據基礎架構和平臺,具備相關產品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)項目應用研發經驗,有MapReduce開發的實戰經驗者優先考慮;

6、熟悉linu_系統;

7、熟練掌握python語言;

8、熟悉數據可視化的基本方法,有數據可視化的開發經驗優先;

9、對數據敏感,具有良好的邏輯分析、責任心強、良好的對外溝通和團隊協作能力

數據倉庫工程師的主要職責篇18

1.維護和管理桌面電腦及外設連接設置,并保證電腦及外設連接設置能正常運行;

2.對硬件故障、軟件、電子郵件和附屬設備等基本問題進行處理解決;

3.對計算機、無線網絡設備、打印機、掃描等設備的安裝和設置;

4.保證我司各職場PC機及外設設備的正常運行;

5.完成直屬上級指派的其他工作任務。

數據倉庫工程師的主要職責篇19

職責:

1負責大數據平臺、數據倉庫多維模型設計

2負責大數據平臺相關生產系統數據的抽取、清洗、轉換等工作

3負責BI平臺設計與報表開發工作

崗位要求:

1、精通數據倉庫建模理論,有參與過2個以上的數據倉庫建設經驗;

2、精通ETL開發,熟悉數據的抽取、常用數據腳本編寫、存儲過程的編寫;

3、熟悉BI平臺,有數據報表設計和開發經驗;

4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一種主流關系數據庫;

5、具備良好的團隊協作精神,良好的溝通能力;

6、供應鏈、物流行業數據從業經歷者優先。

數據倉庫工程師的主要職責篇20

職責:

1、進行住宅數據抽取、數據清洗、數據探索、數據建模分析等工作;

2、負責住宅估值相關業務算法的設計開發;

3、負責房地產估值數據系統的開發;

4、參與項目的技術攻堅和優化,相關系統的架構設計和評審,以及對問題的跟蹤和解決;

5、參與系統文檔的撰寫、維護。

崗位要求:

1、數學、統計學、計算機等專業碩士畢業,具有數據挖掘領域1年以上開發經驗;

2、至少掌握Python、Scala、R等語言其中一種,Python優先;

3、掌握關系型數據庫Oracle、Mysql、Postgresql的使用;

4、熟悉常見的機器學習算法如KNN、決策樹、隨機森林數、邏輯回歸、SVM等算法,熟悉常見深度學習算法CNN、LSTM和神經網絡;

數據倉庫工程師的主要職責篇21

1,為客戶提供固態存儲(SSD)產品和方案的技術講解、產品演示,配合銷售人員完成銷售指標;

2,為客戶提供技術支持,解決客戶使用過程中的技術問題;

3,針對客戶反饋的深度問題,負責與產品和研發團隊溝通做出解決方案;

3,負責項目案例整理、分析、總結和共享推廣。

數據倉庫工程師的主要職責篇22

1.負責Web操作界面開發;

2.與后臺開發工程師協作,完成各種數據交互、動態信息

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業或盈利用途。
  • 5. 人人文庫網僅提供信息存儲空間,僅對用戶上傳內容的表現方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論