數據工程崗位職責
隨著社會不斷地進步,崗位職責起到的作用越來越大,制定崗位職責有助于提高內部競爭活力,提高工作效率。擬起崗位職責來就毫無頭緒?下面是小編整理的數據工程崗位職責,歡迎大家借鑒與參考,希望對大家有所幫助。
數據工程崗位職責1
工作職責:
1、運用數據挖掘和機器學習方法和技術,深入挖掘和分析海量商業(yè)數據
2、包括但不限于風控模型、用戶畫像、商家畫像建模、文本分析和商業(yè)預測等
3、運用數據挖掘/統(tǒng)計學習的理論和方法,深入挖掘和分析用戶行為,建設用戶畫像
4、從系統(tǒng)應用的角度,利用數據挖掘/統(tǒng)計學習的理論和方法解決實際問題
任職要求
—計算機、數學,統(tǒng)計學或人工智能等相關專業(yè)碩士以上學歷,5—10年以上或相關工作經歷
—精通1—2種編程語言(Python或Java),熟練掌握常用數據結構和算法,具備比較強的實戰(zhàn)開發(fā)能力,能帶領團隊共同進步。
—具有統(tǒng)計或數據挖掘背景,并對機器學習算法和理論有較深入的'研究
—熟悉數據挖掘相關算法(決策樹、SVM、聚類、邏輯回歸、貝葉斯)
—具有良好的學習能力、時間和流程意識、溝通能力
—熟悉Spark或hadoop生態(tài)分布式計算框架
—優(yōu)秀的溝通能力,有創(chuàng)新精神,樂于接受挑戰(zhàn),能承受工作壓力
—有互聯網,央企,政務,金融等領域大規(guī)模數據挖掘經驗者優(yōu)先
數據工程崗位職責2
1、海量大數據分析、數據挖掘,負責分析和評估數據質量,提升數據治理的水平并指導數據采集
2、負責數據分析、加工、清理、預處理等數據質量分析工作
3、能夠熟練使用Python編程,掌握numpy、pandas、matplotlib等常用分析工具包
4、能針對特定的業(yè)務場景,從數據中建模,解決問題
5、善于撰寫文檔,善于積累和輸出者優(yōu)先
數據工程崗位職責3
職責:
1負責大數據平臺、數據倉庫多維模型設計
2負責大數據平臺相關生產系統(tǒng)數據的抽取、清洗、轉換等工作
3負責BI平臺設計與報表開發(fā)工作
崗位要求:
1、精通數據倉庫建模理論,有參與過2個以上的數據倉庫建設經驗;
2、精通ETL開發(fā),熟悉數據的抽取、常用數據腳本編寫、存儲過程的'編寫;
3、熟悉BI平臺,有數據報表設計和開發(fā)經驗;
4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一種主流關系數據庫;
5、具備良好的團隊協作精神,良好的溝通能力;
6、供應鏈、物流行業(yè)數據從業(yè)經歷者優(yōu)先。
數據工程崗位職責4
職責:
1.依據應用系統(tǒng)需求創(chuàng)建數據庫存儲,完成數據庫的更新、數據遷移、數據整理
2.管理數據庫用戶,維護數據庫安全。
3.確保數據庫狀態(tài)正常,處理日常事務性數據庫操作,提供業(yè)務和決策支持;
任職要求:
1、熟悉DB2或Oracle數據庫,具備DB2或Oracle開發(fā)經驗并能使用開發(fā)工具
2、熟悉數據庫備份恢復,數據遷移,數據庫調優(yōu)和pl/sql編寫,
3、具備一定的優(yōu)化SQL語句的.能力;
4、會使用SQL語句進行基礎增刪改查操作。遇到問題能自行解決。有實際經驗者優(yōu)先。
數據工程崗位職責5
職責:
1、負責對海量文本內容進行要素提取,精分類別、關聯挖掘等技術的`研發(fā)工作;
2、負責實現文本挖掘技術的產品化,并且結合招標領域開展應用與優(yōu)化;
3、能指導較低職位的工程師完成工作;
4、能與高?蒲袡C構進行協同創(chuàng)新。
任職資格:
1、模式識別/人工智能/計算機相關專業(yè),本科或以上學歷;3年以上工作經驗;
2、正直、誠信、敬業(yè)、有激情、有良好團隊交流能力;
3、精通Java、Python語言,熟悉linux基本開發(fā)環(huán)境;
4、精通NLP相關領域知識,擁有較為豐富的文本處理經驗:精準分詞、實體抽取、屬性抽取、關系抽取、分類聚類、主題挖掘、POI挖掘等;
5、具有NLP實戰(zhàn)經驗,參與過相關項目,有知識圖譜/深度學習研發(fā)經驗者優(yōu)先;熟悉Hadoop、Spark、Storm等分布式處理框架者更佳;
6、熟悉Git,SVN等通用工具;
7、對自然語言處理、知識圖譜構建、人工智能等具有濃厚的興趣。
數據工程崗位職責6
1、負責部分化驗設備的周期內部比對,收集比對數據,數據有異常波動時及時采取措施予以解決一般性故障,并告知部門領導。
2、負責樣品的`收集管理登記和對外樣品的遞送、打包、郵寄。
3、負責出口COA的制作和傳遞。
4、負責對本部門內檢驗崗位進行測試比對,統(tǒng)一并矯正各駐廠檢驗室檢測標準;做好與上海AT化驗數據的比對測試。
5、協助做好化驗設備維修保養(yǎng)和定期周檢工作,按要求維修保養(yǎng)、周檢和送檢。
6、每月匯總和打印成品、原材料分析月報,統(tǒng)計原材料得分表。
7、做好公司組織試驗部分數據的輸入與傳遞、。
數據工程崗位職責7
職責:
1、負責建設數據倉庫架構,包括元數據管理、ETL調度、數據集成、OLAP等子系統(tǒng)的設計和開發(fā);
2、搭建和維護數據倉庫表,解決業(yè)務人員在倉庫系統(tǒng)流程、工具使用、數據處理等遇到的問題;
3、基于對數據的.理解和業(yè)務需求,對數據進行整理、分析和挖掘。
任職資格:
1、做事耐心,有強烈的責任心;
2、計算機,數學,統(tǒng)計學相關專業(yè)本科及以上學歷,
3、熟悉主流的關系型數據庫及MPP數據庫,至少精通一門數據庫,熟悉Gbase優(yōu)先;
4、熟練使用SQL語言,具有2年及以上數據倉庫、報表系統(tǒng)等ETL開發(fā)、維護經驗;
5、熟悉Hadoop/Spark/Hive/Hbase等大數據技術者優(yōu)先;
6、邏輯清晰、對數據敏感,良好的溝通能力和協作能力,敢于接受挑戰(zhàn),能夠承受壓力;
7、有公安相關業(yè)務經驗者優(yōu)先考慮。
數據工程崗位職責8
職責:
1、根據應用場景,進行數據庫設計和性能優(yōu)化;
2、定位和排除數據庫故障,及時解決數據庫運維過程中各種問題;
3、數據庫相關項目管理和實施;
4、學習和研究數據庫相關新技術并應用到生產環(huán)境中;
任職資格:
1、全日制本科及以上學歷,計算機相關專業(yè)畢業(yè);
2、 3年及以上相關工作經驗,有金融行業(yè)運維工作經驗,有DB2、OCP或OCM證書者優(yōu)先;
3、具有數據庫管理或開發(fā)經驗,以及大型數據庫設計、維護經驗;
4、精通DB2、Oracle原理、管理、調優(yōu),精通SQL和PL/SQL,熟練使用(mysql,redis)中1種或以上數據庫相關軟件及調優(yōu)管理經驗;
5、對高并發(fā)、復雜SQL以及數據庫集群系統(tǒng)有深入理解,并具有豐富的管理和優(yōu)化經驗,具有很強的故障定位和問題解決能力;
6、具有良好的`文檔撰寫、閱讀、表達能力;有較強學習和研究能力,獨立分析、解決問題的能力,強烈的責任心與主動性,能自我驅動成長,能承擔較大工作壓力;有良好的組織溝通能力、執(zhí)行力和團隊合作精神;較好的職業(yè)素養(yǎng),嚴謹、務實。
數據工程崗位職責9
1、負責數據倉庫(HADOOP)ETL工作以及數據運營;
2、負責數據產品的業(yè)務需求梳理、數據開發(fā)以及維護;
3、負責數據倉庫的維度建模以及設計相關的'腳本調度;
4、負責維度模型的數據處理的腳本開發(fā),程序開發(fā)以及接口對接。
數據工程崗位職責10
職責:
1、負責海量科技數據(含文本數據)的挖掘工作;
2、負責科技數據挖掘算法模型的構建、應用、評測、報告;
3、主持或參與海量科技數據的入庫工作,科技數據知識圖譜的構建;
4、負責或參與數據挖掘成果論文、專利、標準的撰寫;
5、負責或參與制定數據加工清洗的方案,并形成操作手冊;
6、為指定的課題提出解決方案,并主持或參與方案實施;
7、完成安排的各項工作,與其他部門合作。
崗位要求:
1、數學、統(tǒng)計、金融、科技管理、計算機等相關專業(yè),博士學歷優(yōu)先;
2、具有2年及以上海量數據挖掘經驗,有文本挖掘、非結構化文本處理經驗者優(yōu)先;
3、精通Matlab/Python/R/Scala之一,熟悉Java/C/C++等編程語言,熟練掌握Linux各項操作指令;
4、熟練掌握Hadoop/Spark/Storm/Kafka中的'一項或幾項,有MPI經驗者尚佳;
5、掌握機器學習的基本算法框架,有自然語言處理和豐富的特征工程(特征選擇/特征抽取)經驗者優(yōu)先;
6、掌握關系型數據庫的基本操作,有圖形數據庫、其他非關系型數據庫經驗者尚佳;
7、在醫(yī)療信息化從事產品開發(fā)工作者優(yōu)先,有頂會paper或人工智能領域國際比賽中獲獎者優(yōu)先;
8、有比較強的組織協調能力,可同時處理好多個任務,具備一定的管理能力;
9、性格開朗,具有團隊精神;較強的溝通能力,能與相關業(yè)務和開發(fā)人員討論并快速理解需求。
數據工程崗位職責11
1、負責構建體系框架,公開數據等進行分析,挖掘特征;
2、負責大數據產品的規(guī)劃,需求分析和產品設計和定義;
3、基于現有真實用戶行為數據,能夠從數據中發(fā)現能源的'需求和業(yè)務場景;
4、參與業(yè)務部門臨時數據分析需求的調研、分析及實現;
5、監(jiān)測分析產品運營狀況,持續(xù)優(yōu)化產品功能改造和業(yè)務拓展方向,提出和落實產品優(yōu)化改造方案。
6、撰寫專題大數據分析報告。
數據工程崗位職責12
1、負責大數據平臺搭建及數據倉庫建模;
2、負責數據庫管理及數據優(yōu)化;
3、利用大數據相關技術實現對數據的分析、挖掘、處理、及數據可視化等相關工作;
4、維護大數據平臺并能解決相關問題,保障平臺正常運行;
5、學習和研究新技術以滿足系統(tǒng)需求。
數據工程崗位職責13
1.高質量地完成集團內外各類數據生產集成、數據分析應用建設工作,涉及投研、市場、ERP、全球金融資訊等四個業(yè)務領域方向;
2.需求及源系統(tǒng)數據分析,完成數據倉庫/EDM等系統(tǒng)數據模型及應用模型設計、數據Mapping規(guī)則文檔撰寫、開發(fā)、自測及上線部署;
3.數據質量稽核、問題分析及處理,優(yōu)化數據處理程序;
4.洞察數據、滿足業(yè)務場景需求。
數據工程崗位職責14
職責:
1)配合業(yè)務伙伴推動思邁特數據挖掘產品的銷售,負責售前階段的`客戶需求調研、需求分析,完成項目售前方>案的制作、招投標支持以及產品演示;
2)理解客戶具體業(yè)務需求,利用思邁特數據挖掘軟件,提供明確的大數據分析應用解決方案;
3)負責具體數據挖掘需求的落地實施工作,進行項目現場業(yè)務技術支持、與客戶進行技術溝通;
4)整理行業(yè)案例,深入研究分析市場需求趨勢、行業(yè)知識及發(fā)展方向,并進行行業(yè)案例與解決方案的包裝和推廣;
5)具有良好的溝通表達能力,抗壓能力強,責任心強,接受短期出差;
崗位要求:
1)本科以上學歷,計算機、軟件、數學、統(tǒng)計相關專業(yè)畢業(yè),數學功底扎實及研究生學歷者優(yōu)先考慮,2年以上數據挖掘相關工作經驗;;
2)具備大量數據挖掘經驗,具備項目建模經驗,有自然語言處理、文本分析經驗尤佳;
3)能快速理解客戶需求、解決方案編制、模型開發(fā);
4)至少熟練一門數據挖掘工具,如Python,R等,同時具有Java開發(fā)能力優(yōu)先;
5)精通數據挖掘和機器學習算法,對深度學些有一定的了解以及應用;
6)熟悉Linux開發(fā)環(huán)境,良好的系統(tǒng)編程、數據結構、算法基礎、系統(tǒng)設計能力;
數據工程崗位職責15
職責
1、負責公司數據庫產品的架構設計與優(yōu)化;
2、負責生產數據庫(MySQL/Redis/MongoDB等)的日常運維、穩(wěn)定性保障、性能優(yōu)化;
3、負責數據庫運維標準化,規(guī)范化、產品化和智能化;
4、負責數據中心的設計與搭建,以及后續(xù)的升級與擴容;
5、配合公司產品和項目需求改進數據庫架構,對數據庫設計進行評審;
6、負責數據庫日常維護、可用性監(jiān)控、優(yōu)化備份、容量規(guī)劃、數據遷移等;
7、及時定位和排除數據庫故障,并對數據庫進行持續(xù)性能優(yōu)化。
任職要求:
1、本科及以上學歷,計算機、軟件等相關專業(yè);
2、3-5年數據庫相關研發(fā)運維經驗;
3、精通C/C++、Linux環(huán)境編程、TCP/IP協議棧;
4、對MySQL數據庫從SQL解析、優(yōu)化、執(zhí)行到存儲引擎的整體架構有豐富的理論知識和工程實踐經驗;
5、對數據庫的'高可用架構有豐富的工程實踐經驗,有大規(guī)模分布式存儲系統(tǒng)的設計經驗者優(yōu)先;
6、熟練掌握NoSQL技術(如Redis、MongoDB等),具有集群架構搭建、性能優(yōu)化和監(jiān)控等生產運維經驗;
7、在分布式數據庫、NoSQL、數據倉庫中一個或多個領域有豐富經驗者優(yōu)先;
8、有MySQL高負載高并發(fā)系統(tǒng)的運維經驗;
9、具有良好的學習能力、溝通能力、團隊合作意識,強烈的責任心與主動性。
【數據工程崗位職責】相關文章:
大數據工程崗位職責10-14
數據挖掘工程師崗位職責06-04
數據工程師崗位崗位職責12-19
大數據開發(fā)工程師的崗位職責12-16
數據挖掘工程師工作的崗位職責01-17
數據挖掘算法工程師崗位職責01-24
數據庫工程師崗位職責01-04
數據倉庫工程師崗位職責03-13
數據倉庫工程師的崗位職責04-02