崗位職責是什么
數(shù)據倉庫崗位是一個關鍵的業(yè)務分析角色,負責設計、實施和維護企業(yè)的數(shù)據倉庫系統(tǒng),以支持決策制定和業(yè)務洞察。
崗位職責要求
1. 深入理解企業(yè)業(yè)務流程,能夠識別關鍵數(shù)據需求,并轉化為有效的數(shù)據模型。
2. 熟練掌握數(shù)據倉庫建模技術,如星型、雪花型模型,以及維度建模方法。
3. 掌握etl(提取、轉換、加載)過程,能設計和優(yōu)化數(shù)據抽取和處理流程。
4. 精通sql和至少一種主流數(shù)據倉庫平臺,如oracle、teradata或hadoop。
5. 具備良好的編程能力,熟悉python、java或scala,用于數(shù)據處理和自動化任務。
6. 對大數(shù)據處理和云計算技術有深入了解,如hadoop、spark或aws redshift。
7. 具備良好的項目管理和溝通技巧,能夠協(xié)調各部門資源,確保項目按時完成。
崗位職責描述
數(shù)據倉庫工程師的工作涵蓋從數(shù)據源的獲取到數(shù)據呈現(xiàn)的全過程。他們構建和優(yōu)化數(shù)據倉庫架構,確保數(shù)據的準確性和一致性。此外,他們還需要監(jiān)控系統(tǒng)性能,解決查詢效率問題,以提高整體數(shù)據處理能力。在團隊協(xié)作中,他們與業(yè)務分析師、數(shù)據科學家和it部門緊密合作,確保數(shù)據倉庫滿足業(yè)務需求,為公司的戰(zhàn)略決策提供強有力的數(shù)據支持。
有哪些內容
1. 數(shù)據倉庫設計:根據業(yè)務需求,設計高效、可擴展的數(shù)據倉庫架構,包括數(shù)據模型、分區(qū)策略和索引優(yōu)化。
2. etl開發(fā)與管理:編寫和維護etl腳本,實現(xiàn)數(shù)據清洗、轉換和加載,確保數(shù)據質量。
3. 系統(tǒng)優(yōu)化:監(jiān)控和調整數(shù)據倉庫性能,解決查詢延遲問題,提升系統(tǒng)響應速度。
4. 數(shù)據安全與合規(guī):確保數(shù)據倉庫符合企業(yè)內部政策及行業(yè)法規(guī),保護數(shù)據隱私。
5. 項目協(xié)調:參與項目計劃,與團隊成員溝通,跟蹤項目進度,確保項目成功實施。
6. 技術創(chuàng)新:關注行業(yè)發(fā)展趨勢,評估新技術,推動數(shù)據倉庫系統(tǒng)的持續(xù)改進和升級。
7. 培訓與支持:為業(yè)務用戶和分析師提供技術支持,幫助他們更好地理解和利用數(shù)據倉庫資源。
總結,數(shù)據倉庫崗位在企業(yè)中扮演著至關重要的角色,通過構建和維護高效的數(shù)據存儲和分析環(huán)境,為企業(yè)決策提供有力的數(shù)據支持,驅動業(yè)務發(fā)展。
數(shù)據倉庫崗位職責范文
第1篇 數(shù)據倉庫架構工程師崗位職責
數(shù)據倉庫架構師/etl工程師 同程藝龍 同程網絡科技股份有限公司,同程旅游,同程藝龍,同程 位職責:
1、負責數(shù)據倉庫數(shù)據采集、處理、存儲以及挖掘分析的架構實現(xiàn),負責架構設計和指導團隊落地;
2、參與數(shù)據平臺建設,包括環(huán)境和框架的規(guī)劃搭建以及部分核心編碼工作;設計并實現(xiàn)對bi分析、數(shù)據產品開發(fā)、算法開發(fā)的系統(tǒng)性支持;
3、研究未來數(shù)據模型和計算框架的創(chuàng)新與落地,包括但不限于以下領域:大規(guī)模數(shù)據實時化、研發(fā)模式敏捷化、數(shù)據計算框架輕量化、數(shù)據模型組織方式業(yè)務化等方面。
職位要求:
1、具備5年以上dw系統(tǒng)建設經驗;了解數(shù)據倉庫建設過程中的挑戰(zhàn)與問題,有實際架構設計和數(shù)據建模經驗,有作為技術負責人系統(tǒng)化解決問題的成功案例;
2、有dw/bi架構體系中某些領域的專項建設經驗,包括但不限于:數(shù)據質量、元數(shù)據管理、主數(shù)據管理、數(shù)據監(jiān)控、流計算、分布式計算、分布式文件系統(tǒng)、分布式存儲、大規(guī)模數(shù)據實時化、跨平臺資源調度;
3、熟悉hadoop生態(tài)圈,包括但不限于:hadoop、hive、storm、spark、dremel、kylin等;
4、有海量數(shù)據建模實踐經驗優(yōu)先。
第2篇 數(shù)據倉庫顧問崗位職責
售前咨詢顧問(數(shù)據倉庫/大數(shù)據產品方向) 勝科金仕達 勝科金仕達數(shù)據系統(tǒng)(中國)有限公司,sungard china,勝科金仕達,勝科金仕達中國,勝科金仕達 職位描述:
1.負責數(shù)據分析、數(shù)據倉庫等數(shù)據類項目的需求挖掘,售前,方案設計等
2.為數(shù)據倉庫、數(shù)據集市、管控工具和可視化bi項目提供售前支持
3.負責與客戶進行現(xiàn)場交流、售前等工作
4.負責客戶售前解決方案、產品白皮書等整理編寫
5.理解客戶需求,根據客戶需求設計解決方案
6.參與招投標,獨立進行投標技術講解等招投標工作
崗位要求:
1.2-5年的數(shù)據倉庫、bi開發(fā),售前或項目管理等方面經驗
2.本科以上,計算機相關專業(yè),碩士優(yōu)先
3.有較強的邏輯分析能力,口頭表達能力強
4.具備數(shù)據倉庫相關技術能力
5. 熟練使用ppt、word、e_cel等辦公工具
6. 有責任感,具備良好的溝通能力和團隊合作精神。
第3篇 大數(shù)據開發(fā)(數(shù)據倉庫)職位描述與崗位職責任職要求
職位描述:
崗位職責:
1、參與計算框架和服務的定制和改進,為公司批處理和流式計算能力提供支撐
2、基于業(yè)務需求和應用場景,設計和實現(xiàn)公司大數(shù)據相關產品
3、負責設計,開發(fā),優(yōu)化數(shù)據接入、數(shù)據存儲、數(shù)據計算服務框架
4、為公司所有業(yè)務線提供數(shù)據支持和服務
任職要求:
1、本科以上學歷,3年以上大數(shù)據開發(fā)經驗,掌握數(shù)據倉庫理論、模型設計方法、etl設計理論等
2、對大數(shù)據離線數(shù)倉有成熟的解決方案和實踐經驗
3、深入理解公司業(yè)務,建立指標分析體系,利用數(shù)據分析,不斷驅動業(yè)務優(yōu)化,策略分析經驗豐富優(yōu)先
4、了解sql, hive sql,sparksql優(yōu)先,熟悉python編程,java基礎編程
5、有較強的性能優(yōu)化及問題排查、解決能力
6、具備良好的溝通能力,做事認真、仔細,有責任心,具有團隊協(xié)作能力
第4篇 外包高級數(shù)據倉庫開發(fā)工程師職位描述與崗位職責任職要求
職位描述:
職責描述:
1.能夠獨立的分析和設計數(shù)據倉庫需求解決方案;
2.善于和用戶溝通、準確了解和定義業(yè)務需求并設計解決方案;
3.熟練掌握mysql數(shù)據庫,精通sql語句編寫;
5.有數(shù)據倉庫/數(shù)據集市相關項目背景者有限考慮;
6.5年以上數(shù)據庫實際項目開發(fā)經驗;
7.熟練掌握etl工具,掌握kettle/informatica開發(fā)者優(yōu)先;
8.熟悉shell、perl等腳本語言者優(yōu)先;
9.良好的溝通和學習能力。
第5篇 數(shù)據倉庫研發(fā)工程師崗位職責
搜狗金融-數(shù)據倉庫研發(fā)工程師-北京-02173 (mj001926) 搜狗 北京搜狗科技發(fā)展有限公司,北京搜狗科技,搜狗,搜狗科技,搜狗翻譯,搜狗詞典,搜狗 崗位職責:
1、 數(shù)據倉庫、數(shù)據集市的數(shù)據模型設計
2、 數(shù)據倉庫etl規(guī)則設計和開發(fā)
3、 利用hql進行數(shù)據清洗,根據應用場景建立數(shù)據集市。
4、 數(shù)據倉庫數(shù)據導入,建表,日常任務跑批,日志監(jiān)控。
5、 數(shù)據倉庫需求調研和需求分析
任職條件:
1、 熟悉python,熟練使用shell編程解決數(shù)據清洗;
2、 熟練使用hadoop、hive、sqoop,熟練使用hive sql并有一定編寫 map/reduce 開發(fā)經驗;
3、 熟悉數(shù)據倉庫建模理論,了解數(shù)據倉庫數(shù)據分層架構,精通3nf和多維數(shù)據模型設計;
4、 具備大中型數(shù)據倉庫架構設計、模型設計、etl設計的相關經驗;
5、 具備海量數(shù)據處理、有性能調優(yōu)經、金融、電商、電信、互聯(lián)網行業(yè)數(shù)據模型經驗者優(yōu)先
這是一款定位于服務平臺互聯(lián)網用戶的金融產品,由搜狗公司內部孵化,深度挖掘搜狗在互聯(lián)網端的用戶規(guī)模優(yōu)勢以及多年的大數(shù)據能力積累。在當下大熱的互聯(lián)網金融領域,搜狗將發(fā)揮用戶服務和智能算法優(yōu)勢,并結合平臺的綜合運營實力。
第6篇 數(shù)據倉庫技術負責人職位描述與崗位職責任職要求
職位描述:
職責描述:
1.領導由軟件工程師和數(shù)據挖掘工程師組成的團隊,來設計和構建pb級別的數(shù)據倉庫平臺。
2.提供數(shù)據倉庫的頂層設計。
3.組織團隊管理使用各類多pb分析堆棧。
4.推動數(shù)據標準工具(作業(yè)調度程序,etl,數(shù)據可視化,查詢編輯器等)的開發(fā)。
5.與其他團隊的技術負責人,產品負責人緊密聯(lián)系,以確保數(shù)據作為可行資源可以滿足當前和未來特定it系統(tǒng)內外需求
6.盡最大的努力保持工程師的成長和快樂。
任職要求:
1.擁有計算機相關專業(yè)本科及以上學歷。
2.熟悉java語言,有hadoop, spark等大數(shù)據框架的使用經驗。
3.熟練運用spring,mybatis等主流的開發(fā)框架;熟練使用oracle、mysql數(shù)據庫;熟悉git、junit、maven等工具應用。
4.熟悉敏捷開發(fā)流程。
5.在大數(shù)據平臺或分析團隊中擁有2年以上的研發(fā)管理經驗。
6.有豐富的設計和構建數(shù)據倉庫的經驗。
7.出色的溝通和跨團隊合作技巧。
第7篇 bi數(shù)據倉庫工程師崗位職責
bi工程師-數(shù)據倉庫 涂鴉智能 杭州涂鴉科技有限公司,涂鴉智能,愛相機 崗位職責:
1. 負責業(yè)務數(shù)據調研、需求理解,數(shù)據采集方案設計及實現(xiàn);
2. 負責建立數(shù)據模型,根據業(yè)務設計數(shù)據主題;
3. 負責數(shù)據模型的etl編寫,參與團隊etl流程的優(yōu)化及解決etl相關技術問題;
4. 理解業(yè)務方的數(shù)據需求,提供面向業(yè)務的olap、報表、數(shù)據提取等數(shù)據服務;
任職要求:
1. 本科及以上學歷,計算機相關專業(yè),2-5年企業(yè)級數(shù)據平臺相關系統(tǒng)開發(fā)經驗;
2. sql技能嫻熟,精通hive-sql,presto-sql
3. 具有扎實的計算機操作系統(tǒng)、數(shù)據結構等編程基礎,熟悉java或scala語言;
4. 有過2年以上bi項目經驗,熟悉開源的bi工具如:metabase,superset,redash.有實際操作經驗。
7. 有良好的溝通能力,善于主動思考和行動,有極強的責任心和自驅力。
第8篇 數(shù)據倉庫系統(tǒng)架構師職位描述與崗位職責任職要求
職位描述:
崗位職責:
1. 負責海量數(shù)據的整體架構設計和數(shù)據架構管控、根據具體業(yè)務和產品對數(shù)據模型進行統(tǒng)一分析和規(guī)劃;
2. 負責企業(yè)級信息架構(如業(yè)務數(shù)據對象識別、數(shù)據實體、數(shù)據屬性分析、數(shù)據標準、端到端數(shù)據流等)的設計與優(yōu)化;確保變革方案對架構遵從,并協(xié)助推動跨領域重大數(shù)據問題的分析、定位、解決方案設計和落地;
3. 負責技術設計及技術實現(xiàn)規(guī)范編制,指導開發(fā)團隊進行項目設計、項目實現(xiàn)及技術匯報;
4. 負責項目重點模塊的功能設計和難點攻堅;
5. 對開發(fā)團隊提供架構導引、技術監(jiān)督和風險預判,確保開發(fā)技術框架不偏離正確方向;
6. 配合項目經理進行技術決策、風險評估、及技術架構宣貫和推廣;
7. 其他部門發(fā)展所需承擔的必要工作。
任職要求:
1、計算機相關專業(yè)本科以上學歷。有5年及以上架構師工作經驗,有3年以上大數(shù)據相關領域工作經驗。
2、具有扎實的大數(shù)據和數(shù)據倉庫的理論功底,負責過大數(shù)據平臺或數(shù)據倉庫設計。
3、算法基礎扎實,熟悉常見的數(shù)據結構,深入理解分布式算法和分布式系統(tǒng)原理。
5、善于溝通,有良好的文檔寫作能力,良好的溝通能力和團隊合作精神,良好的抽象思維,理性做出技術決策,具有風險控制意識。
第9篇 數(shù)據倉庫開發(fā)高級工程師職位描述與崗位職責任職要求
職位描述:
工作職責:
1、負責字節(jié)跳動旗下的用戶產品線的數(shù)據倉庫架構設計、建模和etl開發(fā);
2、參與數(shù)據治理工作,提升數(shù)據易用性及數(shù)據質量,與數(shù)據工具團隊緊密合作;
3、理解并合理抽象業(yè)務需求,發(fā)揮數(shù)據價值,與業(yè)務團隊緊密合作。
任職要求:
1、精通數(shù)據倉庫實施方法論、深入了解數(shù)據倉庫體系,并支撐過實際業(yè)務場景;
2、具備較強的編碼能力,熟悉sql,python,hive,spark,kafka,storm中的多項,有至少tb以上級大數(shù)據處理經驗;
3、對數(shù)據敏感,認真細致,善于從數(shù)據中發(fā)現(xiàn)疑點;
4、善于溝通,具備優(yōu)秀的技術與業(yè)務結合能力。
第10篇 數(shù)據倉庫開發(fā)(_h_)職位描述與崗位職責任職要求
職位描述:
數(shù)據倉庫工程師
工作職責:
1.參與或負責數(shù)據產品或數(shù)據倉庫應用項目的etl設計、開發(fā)、維護及質量核查;
2.參與或負責數(shù)據倉庫模型的規(guī)劃和設計,建立并執(zhí)行統(tǒng)一的數(shù)據開發(fā)規(guī)范;
3.參與或負責數(shù)據倉庫基礎設施和平臺的建設,搭建教育行業(yè)領域的企業(yè)級數(shù)據倉庫;
4.和數(shù)據分析師團隊及其他需求部門進行有效溝通,完成數(shù)據需求及數(shù)據問題解決等;
5.完成日常數(shù)據質量的監(jiān)控,跟蹤處理各類數(shù)據質量問題。
職位要求:
1.熟悉主流關系數(shù)據庫,熟練sql開發(fā),熟悉linu_系統(tǒng)、shell編程;
2.精通數(shù)據倉庫的etl的開發(fā),有海量數(shù)據處理相關經驗;
3.熟悉數(shù)據倉庫領域數(shù)據模型設計方法,并有相關數(shù)倉模型設計經驗;
4.熟悉hadoop、hive、hbase、kafka、 flume、spark等開源框架,優(yōu)先考慮;
5.較好的溝通理解能力,性格樂觀,態(tài)度踏實,積極上進。
第11篇 數(shù)據倉庫/etl/bi工程師職位描述與崗位職責任職要求
職位描述:
職責描述:
1、負責數(shù)據倉庫建模,業(yè)務數(shù)據集市建設開發(fā)
2、負責數(shù)據倉庫etl流程的優(yōu)化及解決etl相關技術問題、etl流程監(jiān)控,保障數(shù)據平臺架構穩(wěn)定性
3、建立數(shù)據分析指標體系,不斷完善指標體系和分析模型;
4、通過專項分析,輸出專項分析報告
5、負責數(shù)據分析相關需求和數(shù)據測試的工作
任職要求:
學歷要求:
全日制統(tǒng)考類本科及以上學歷,計算機、通信、電子、軟件工程、統(tǒng)計學、應用數(shù)學、數(shù)據分析等相關專業(yè)
專業(yè)技能:
1、熟悉數(shù)據倉庫各類模型建模理論,熟悉數(shù)據倉庫數(shù)據分層架構和多維數(shù)據模型設計;
2、豐富的數(shù)據分析經驗,熟練掌握sql、hql、sparksql,擅長運用其分析并完成復雜業(yè)務數(shù)據查詢
3、掌握至少一種數(shù)據庫開發(fā)技術:mysql/oracle/db2等,靈活運用sql實現(xiàn)海量數(shù)據etl加工處理;
4、熟悉hadoop生態(tài)(如:hdfs/mapreduce/hive/hbase等),并有相關實踐經驗;
5、熟練掌握一門或多門編程語言(如:python/shell/java/c++等),并有大型項目建設經驗者優(yōu)先;
素質:
1、敏銳的數(shù)據觀察和分析能力,及時發(fā)現(xiàn)和分析其中隱含的變化和問題并給出建議;
2、良好的溝通能力和團隊精神,較強的學習能力,能承擔一定的工作壓力。
經驗:
至少2年以上數(shù)據倉庫(離線&實時)模型設計開發(fā)、etl設計開發(fā)的相關經驗,有通信運營商o域/b域大數(shù)據、智慧城市大數(shù)據的數(shù)據倉庫、etl設計研發(fā)經驗者優(yōu)先
第12篇 dw數(shù)據倉庫etl工程師職位描述與崗位職責任職要求
職位描述:
職責描述:
1. 負責數(shù)據倉庫開發(fā)需求收集和分析;
2. 負責數(shù)據模型體系構建及數(shù)據主題設計和開發(fā);
3. 負責數(shù)據抽取、清洗、轉化等數(shù)據處理程序開發(fā);
4. 負責對公司數(shù)據倉庫平臺整體架構改進與流程優(yōu)化;
5. 負責bi報表開發(fā)和優(yōu)化。
任職資格:
1. 2年以上數(shù)據倉庫工作經驗;
2. 熟悉數(shù)據庫、etl、bi建模等工具;
3. 良好編程習慣,以及較強的學習能力和溝通能力。
第13篇 數(shù)據倉庫顧問崗位職責任職要求
數(shù)據倉庫顧問崗位職責
數(shù)據倉庫實施顧問 oracle甲骨文 甲骨文(中國)軟件系統(tǒng)有限公司 ? 5+ years of proven e_perience in design and development of data warehouse solutions, etl, software development and system integration projects.
? data migration in large and comple_ environments
? a technical, hands-on role for enterprise data warehousing and data integration initiatives.
? good e_perience in data modeling and data architecture.
? strong understanding of dw concepts / design and implementation.
? understanding of conceptual, logical, and physical data modeling.
? good understanding of service oriented architectures , application frameworks and system integration methods.
? e_perience of full lifecycle development projects.
? development e_perience with oracle database technologies, strong pl / sql skills.
? building of operational data stores ( ods ), data marts, enterprise data business and technical metadata management.
? data analysis and data model development ( i.e. logical and physical models )
? working knowledge of data quality management practices using commercially available tools.
? familiarity with data governance concepts and processes.
? enterprise data integration e_perience in leading eai / etl tools and olap tools.
? familiarity with master data management concepts.
? business intelligence e_pertise and technical skills to successfully deliver solutions.
? good communication skills and technical documentation)
? ability to organize prioritizes work, meet deadlines and work independently.
? ability to handle multiple projects and activities in a timely, organized manner
第14篇 數(shù)據倉庫高級工程師職位描述與崗位職責任職要求
職位描述:
工作職責:
1、負責今日頭條的用戶產品線的數(shù)據倉庫架構設計、建模和etl開發(fā);
2、參與數(shù)據治理工作,提升數(shù)據易用性及數(shù)據質量,與數(shù)據工具團隊緊密合作;
3、理解并合理抽象業(yè)務需求,發(fā)揮數(shù)據價值,與業(yè)務團隊緊密合作。
任職要求:
1、精通數(shù)據倉庫實施方法論、深入了解數(shù)據倉庫體系,并支撐過實際業(yè)務場景;
2、具備較強的編碼能力,熟悉sql,python,hive,spark,kafka,storm中的多項,有至少tb以上級大數(shù)據處理經驗;
3、對數(shù)據敏感,認真細致,善于從數(shù)據中發(fā)現(xiàn)疑點;
4、善于溝通,具備優(yōu)秀的技術與業(yè)務結合能力。
第15篇 數(shù)據倉庫開發(fā)(高級)工程師職位描述與崗位職責任職要求
職位描述:
工作職責:
1、負責今日頭條的用戶產品線的數(shù)據倉庫架構設計、建模和etl開發(fā);
2、參與數(shù)據治理工作,提升數(shù)據易用性及數(shù)據質量,與數(shù)據工具團隊緊密合作;
3、理解并合理抽象業(yè)務需求,發(fā)揮數(shù)據價值,與業(yè)務團隊緊密合作。
任職要求:
1、精通數(shù)據倉庫實施方法論、深入了解數(shù)據倉庫體系,并支撐過實際業(yè)務場景;
2、具備較強的編碼能力,熟悉sql,python,hive,spark,kafka,storm中的多項,有至少tb以上級大數(shù)據處理經驗;
3、對數(shù)據敏感,認真細致,善于從數(shù)據中發(fā)現(xiàn)疑點;
4、善于溝通,具備優(yōu)秀的技術與業(yè)務結合能力。
第16篇 數(shù)據倉庫崗位職責
資深數(shù)據倉庫工程師(嚴選)-郵件事業(yè)部172 網易集團 網易(杭州)網絡有限公司,杭州網易,網易,網易杭州,網易游戲,網易網絡,網易集團,網易 工作職責:
1. 負責電商數(shù)據倉庫搭建、etl開發(fā)與維護;
2. 完成數(shù)據統(tǒng)計、編寫計算任務、接口開發(fā);
3. 參于數(shù)據規(guī)范制定、文檔編寫。
任職要求:
1.本科以上學歷,軟件工程/計算機/通信/數(shù)學等相關專業(yè);
2.熟悉hive sql語言,熟悉shell, python等至少一種腳本語言;
3.有hadoop、spark、flink等至少一種大數(shù)據平臺的使用經驗;
4.理解能力強,善于溝通,有責任心和團隊精神;
5.有數(shù)據倉庫建設、商業(yè)數(shù)據分析、增長項目經驗者優(yōu)先。
第17篇 資深數(shù)據倉庫工程師職位描述與崗位職責任職要求
職位描述:
工作職責
1、基于公司數(shù)據建設需要,完成數(shù)據內容開發(fā)等工作,維護與完善數(shù)據模型各類信息;
2、負責各業(yè)務線系統(tǒng)的信息調研、表與字段的關系梳理,根據業(yè)務及日常需求來優(yōu)化模型;
3、工作中對數(shù)據平臺基礎設施、數(shù)據內容建設等工作主動深度思考,提升效能、促進組織和系統(tǒng)發(fā)展;
4、負責核心數(shù)據倉庫模型代碼開發(fā),跟進etl的完成。負責接入源系統(tǒng)數(shù)據的腳本開發(fā)、數(shù)據測試與驗證、以及調度開發(fā)等工作;
5、與上游系統(tǒng)與下游應用同事溝通協(xié)作,推動各類需求在數(shù)據模型中的落地;
6、跟蹤、監(jiān)測、維護及優(yōu)化數(shù)據模型,確保數(shù)據模型被使用。
任職資格
1、本科以上學歷,5年或以上金融行業(yè)數(shù)據類工作經驗;
2、熟悉hadoop生態(tài)系統(tǒng)組件,如:hive、mapreduce、spark、hbase等;具備編寫、優(yōu)化復雜sql的能力;
3、負責過大型數(shù)據平臺或數(shù)據倉庫設計,具有扎實的大數(shù)據和數(shù)據倉庫的理論功底;
4、掌握一定的數(shù)據質量管理方法論、評估模型設計、質量報表設計,能夠根據數(shù)據質量要求制定數(shù)據質量探查規(guī)則并進行實施;
5、掌握一定元數(shù)據管理方法論、元數(shù)據管理設計。
6、能夠圍繞業(yè)務和產品特征建模并解決問題;
7、具有豐富的數(shù)據實踐經驗;
8、基于公司數(shù)據建設需要,完成數(shù)據內容開發(fā)等工作,維護與完善數(shù)據模型各類信息。
第18篇 數(shù)據倉庫開發(fā)工程師-lark職位描述與崗位職責任職要求
職位描述:
工作職責:
1、負責創(chuàng)新工具核心業(yè)務模塊數(shù)據倉庫的構建;
2、負責數(shù)據模型的設計,etl實施、etl性能優(yōu)化、etl數(shù)據監(jiān)控以及一系列技術問題的解決;
3、負責構建用戶主題、各業(yè)務線主題、推薦主題、企業(yè)bi門戶系統(tǒng);
4、負責全產品線數(shù)據字典維護,提升數(shù)據資產質量。
任職要求:
1、計算機、數(shù)學相關專業(yè)本科及以上學歷,三年以上大數(shù)據開發(fā)工作經驗,數(shù)據挖掘和bi分析領域優(yōu)先;
2、熟練掌握hive/sql,熟悉spark/map-reduce/mpi分布式計算框架,熟悉大數(shù)據的離線和實時處理,可以進行海量數(shù)據模型的設計、開發(fā);
3、有產品sense,主動思考基于業(yè)務場景下的數(shù)據體系建設;
4、工作認真,負責,良好的團隊合作精神和解決問題分析能力。鉆研技術克服困難,勇于挑戰(zhàn);
5、有數(shù)據分析經驗優(yōu)先。
第19篇 數(shù)據倉庫開發(fā)工程師-創(chuàng)新工具職位描述與崗位職責任職要求
職位描述:
工作職責:
1、負責創(chuàng)新工具核心業(yè)務模塊數(shù)據倉庫的構建;
2、負責數(shù)據模型的設計,etl實施、etl性能優(yōu)化、etl數(shù)據監(jiān)控以及一系列技術問題的解決;
3、負責構建用戶主題、各業(yè)務線主題、推薦主題、企業(yè)bi門戶系統(tǒng);
4、負責全產品線數(shù)據字典維護,提升數(shù)據資產質量。
任職要求:
1、計算機、數(shù)學相關專業(yè)本科及以上學歷,三年以上大數(shù)據開發(fā)工作經驗,數(shù)據挖掘和bi分析領域優(yōu)先;
2、熟練掌握hive/sql,熟悉spark/map-reduce/mpi分布式計算框架,熟悉大數(shù)據的離線和實時處理,可以進行海量數(shù)據模型的設計、開發(fā);
3、有產品sense,主動思考基于業(yè)務場景下的數(shù)據體系建設,而不單單只會做執(zhí)行;
4、工作認真,負責,良好的團隊合作精神和解決問題分析能力。鉆研技術克服困難,勇于挑戰(zhàn);
5、有分析經驗的優(yōu)先。
第20篇 數(shù)據倉庫開發(fā)工程師職位描述與崗位職責任職要求
職位描述:
職責描述:
1、負責數(shù)據倉庫的模型規(guī)劃設計工作;
2、負責數(shù)據倉庫etl規(guī)則設計、數(shù)據映射工作;
3、負責數(shù)據倉庫建設需求調研、業(yè)務溝通;
4、負責業(yè)務模型抽象和數(shù)據模型的設計開發(fā)。
任職要求:
1、計算機相關專業(yè)本科及以上學歷;
2、5年以上數(shù)據倉庫建模經驗;
3、熟悉etl、數(shù)據倉庫開發(fā)及相關技術,熟悉hive等主流數(shù)據庫技術,精通sql開發(fā)與優(yōu)化;
4、熟練掌握維度建模理論,有能力分析業(yè)務數(shù)據,完成數(shù)據倉庫模型設計;
5、有實時數(shù)據處理開發(fā)經驗(如flink/sparkstreaming/storm)優(yōu)先;
6、對apache kylin以及其他olap技術深入了解者優(yōu)先;
7、工作態(tài)度踏實認真、積極主動,可接受較高強度工作,具備良好的溝通能力和協(xié)調能力。