- 相關推薦
在現在的社會生活中,越來越多人會接觸到崗位職責,崗位職責具有提高內部競爭活力,更好地發現和使用人才的作用。我敢肯定,大部分人都對制定崗位職責很是頭疼的,以下是小編為大家收集的數據開發工程師崗位職責,僅供參考,歡迎大家閱讀。
數據開發工程師崗位職責 1
職責:
1.負責公司大數據業務集群的運維工作確保高可用;
2.負責基礎運維、故障定位、容量規劃、擴容及性能優化;
3.設計實現大規模分布式集群的運維、報警監控和管理平臺;
4.參與業務架構設計,在設計階段給出可運維性改進建議;
5.深入研究大數據業務相關運維技術,持續優化集群服務架構,探索新的大數據運維技術及發展方向。
任職資格:
1.大專以上學歷,2年及以上大數據運維工作經驗,熟悉hadoop/hbase/hive/Yarn/Spark等分布式相關技術,熟悉源碼尤佳,至少掌握python/shell中的`一種語言,接受優秀應屆畢業生;
2.了解大數據平臺應用架構,具備常見問題的基本分析和解決能力;
3.熟悉Linux操作系統的配置、管理及優化,能夠獨立排查及解決操作系統層面的問題;
4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web應用/中間件及主流開源數據庫的使用和配置。
數據開發工程師崗位職責 2
職責:
1、負責所分管團隊的團隊建設和日常管理工作;
2、負責核心技術問題攻關和性能優化,持續維護和引進最新的大數據技術到城市大數據平臺中,支撐城市級大數據平臺業務;
3、承擔城市數據標準編制和數據模型的設計;
4、承擔項目中數據相關方案設計及數據團隊管理;
5、參與城市大數據項目中數據采集、加工過程、分析挖掘模型算法的實施工作。
任職資格:
1、1年以上數據開發工作經驗,熟練使用SQL查詢引擎;
2、熟悉Hadoop、Mpp、Oracle等至少一種數據倉庫工具
3、具備良好的.編程語言基礎如:java/python/scala/c++/shell等
4、二本以上學歷,計算機相關專業或者有相關培訓經歷者優先
5、個人素質要求:目光長遠、態度誠懇、崗位有穩定性,能夠長期培養、具備很強的自學能力、承壓能力強、接受出差支援項目等工作。對數據工作具備濃厚的興趣并有明確職業規劃,優秀的學習能力和團隊溝通協作能力,對新技術有濃厚興趣并有鉆研精神。
數據開發工程師崗位職責 3
職責:
1、負責研發PAAS開放平臺開發,完成需求分析詳細設計,spring boot基礎組件的使用和擴展開發工作;
2、負責研發PAAS平臺業務中臺,數據中臺的研發工作,能夠準確把握業務需求,參與系統設計,負責核心代碼的`實現;
3、負責帶領3-5人研發團隊,實現系統規劃需求。
【任職要求】
業務技能要求:
1、精通Java語言,深刻理解常用微服務組件,如Spring,Spring Boot, Spring Cloud, Mybatis;
2、熟悉Shell或者Python腳本并能在Linux環境進行開發;
3、了解常用中間件系統,如RabbitMQ,RocketMq,Redis,ZooKeeper系統等;
4、熟悉Mysql數據庫以及常見的NoSQL DB,如MongoDB等;
5、了解常用工具如Git , Jenkins, Maven 等。
數據開發工程師崗位職責 4
職位描述:
1、支撐dmp人群包計算的業務需求,參與服務端代碼開發;
2、支撐dmp標簽的技術升級,參與數據產出流程性能優化;
3、支持dmp大規模數據的.計算和分析。
任職要求:
1、本科及以上學歷,計算機、通信等相關專業,1-2年相關工作經驗;
2、有良好的數據結構、算法基礎和扎實的編程能力;
3、熟悉python/java/c++/scala其中任意一門或者多門語言;
4、熟悉hadoop/kafka/spark/storm/flink/hive其中的若干技術;
5、具有良好的團隊溝通意識和快速學習能力;
6、加分項: 熟悉大數據處理或者dmp業務.
數據開發工程師崗位職責 5
職位描述:
1、負責數據收集、清洗和規約等工作;
2、提供面向業務的數據服務,完成數據指標的統計、多維分析和展現;
3、根據業務和產品情況,抽象業務邏輯,搭建和開發大數據平臺。
任職要求:
1、統招本科或以上學歷;
2、精通sql,有較好的sql性能調優經驗,了解hive/mysql的基本原理和調優策略
3、熟悉常用的數據挖掘、分析的.工具和方法,熟悉linux平臺,精通shell/python/php等腳本語言的一種或多種,編碼基本功扎實 ;
4、精通java開發,熟悉大數據處理相關技術,有hadoop開發經驗,掌握mapreduce。
數據開發工程師崗位職責 6
職責:
1.負責機票酒店大數據項目的評估、設計及關鍵模塊研發;
2.參與公司大數據平臺及聯機分析系統的.建設;
3.機器學習算法討論、評估及算法的最終編碼實現;
4.數據平臺開發規范制定,數據建模及核心框架研發;
任職要求:
1.本科及以上學歷,計算機或數學相關專業,三年以上相關工作經驗;
2.掌握Java、Python、Scala等中的一到兩種語言;
3.熟悉Mongodb、Hive、Hbase、Redis等NoSQL數據庫開發和調優;
4.熟悉數據相關開源框架和工具,如ZooKeeper、Spark、Flink、Impala、Kylin等;
5.對數據結構和機器學習算法有一定的了解;
6.具有海量數據處理、數據挖掘、數據分析相關項目的工作經驗者優先;
7.有機票酒店等旅游行業數據開發經驗者優先。
數據開發工程師崗位職責 7
職責
1.數據庫安裝、配置、故障處理、備份與恢復;
2.數據庫性能監控與優化、數據庫安全加固、數據庫空間管理等(包括線上、線下環境);
3.負責項目數據ETL整合與數據庫設計;
4.審核數據庫設計方案和SQL語句,對上線數據庫質量進行管理;
5.負責數據庫操作標準化流程制定,并遵照執行;(如數據庫設計規范、數據庫變更管理規范)
6.負責跟進、試用廈門數據組產出的工具、數據整合方案,以及在重慶團隊中推廣使用;
7.提升實施團隊數據庫運維相關技能。
崗位要求
1、計算機或相關專業本科以上學歷,2年以上數據處理工作經驗;
2、精通關系型數據庫體系架構和原理,精通存儲過程、觸發器、動態SQL的.編寫;
3、精通數據庫的性能優化及SQL語句的優化;
4、精通MySql/oracle數據庫的規劃、設計、優化及運維;
5、熟悉Linux常用命令,熟悉shell/python/perl(其中一種)腳本開發;
6、熟悉數據庫的負載解決方案,如分庫、分表、主從;
7、高度的責任心、良好的溝通技巧和團隊合作精神;
數據開發工程師崗位職責 8
職位描述:
工作職責:
1、基于海量數據,支持業務對數據的分析和使用;
2、支持業務處理數據的`流式處理、分析客戶行為等。
任職要求:
1、精通至少一門編程語言,熟練運用各種常用算法和數據結構,有獨立的實現能力 ;
2、熟悉常用的開源組件:hadoop/hive/spark/storm,并了解其特性和使用場景優先;
3、熟悉機器學習、數據挖掘、數據分析、分布式計算至少某一方面,有較深的理論研究和實踐經驗優先;
4、數據分析、推薦、機器學習、數據挖掘相關的開發工作優先。
數據開發工程師崗位職責 9
崗位職責:
1、負責結構化數據和文本的數據處理、建模、分析等工作,如:數據清洗、中文分詞、情感分析、文本分類等;
2、負責數據需求的收集、整理和分析,配合其他同事完成結構化數據和文本的需求分析;
3、負責分析結果的可視化展現;
4、負責核心算法的設計與優化。
任職要求:
1、全日制本科畢業;
2、計算機或數學或軟件類或統計相關專業;
3、熟悉數據挖掘和文本挖掘的'理論基礎,掌握統計模型、機器學習相關原理;
4、熟悉r/python/java等編程語言,熟悉常用數據結構和算法,熟悉正則表達式的使用。
數據開發工程師崗位職責 10
崗位職責:
分布式大數據系統開發、計算性能調優、 高性能服務框架設計與開發;
參與項目的`架構設計、評審、技術攻堅及優化;
參與系統文檔的撰寫、維護。
任職要求:
本科以上學歷,計算機或相關專業;
3年以上linux后臺開發經驗,有大規模系統開發經驗;
精通http、tcp/ip協議,網絡編程;
熟悉linux操作系統原理,常用工具;
熟悉常用大數據開源組件;
有高并發、大容量后臺服務系統設計經驗;
具有良好的學習能力、溝通能力、團隊合作意識;
強烈的責任心與主動性,對所負責工作有owner意識,并能自我驅動成長;
對hadoop、flink、spark、lucene等開源項目有大規模應用經驗,contributor或者committer優先。
數據開發工程師崗位職責 11
職位描述:
1、承擔現有數據平臺的`開發和優化工作
2、根據業務需求進行數據模型的調研、設計、開發及驗證工作,并持續進行模型優化
3、負責數據模型架構的構建,建立數據抽取、清洗、校驗等數據加工流程規范及olap多維數據分析模型
4、負責實時計算平臺搭建。
職位要求:
1、3-5年以上的相關工作經驗
2、熟悉分布式計算平臺
3、有日志采集,數據處理,數據倉庫建模,etl等經驗
4、熟悉java、python、spark開發
5、熟練掌握linux shell及sql語言
6、有獨立負責數據某一模塊的實際項目經驗
7、有過用戶畫像等方面開發經驗者優先
8、有實時處理開發經驗者優先
數據開發工程師崗位職責 12
1. 建立和維護公司IT項目建設管理的規章制度;
2. 項目進度跟蹤和控制,風險識別,里程碑監控、項目成本管理;
3. 根據公司IT系統需求和系統設計要求,進行詳細分析、設計,編寫設計文檔,進行功能模塊的'代碼編寫工作;
4. 協助進行公司IT系統架構設計,技術規劃及技術可行性分析,對公司IT系統架構方案提出優化改進建議,提高系統架構質量;
5. 根據開發規范編寫各種開發文檔及項目文檔;
6. 評估項目交付件,對系統質量負責。
7. 對于開發外包項目,作為開發接口人與供應商進行系統開發對接,對開發進度進行管理控制,修正開發偏差。
8. 上級領導安排的其他工作。
數據開發工程師崗位職責 13
職責:
1、根據數據倉庫及BI項目的需求,制定ETL相關的設計方案和開發計劃,并進行后續的.設計、實施、維護;
2、負責數據倉庫數據模型的開發,發布,測試工作;
3、負責多種類型的數據報表的研發工作,包括鉆取類報表,表格類報表,和圖形化報表的研發,測試和發布工作;
4、承擔數據抽取、清洗、轉化等數據處理程序開發。
任職要求:
1、計算機相關專業本科及以上學歷
2、精通數據倉庫的數據模型設計,熟悉ETL工具如DataStage,有3年以上的實際BI項目經驗;
3、精通Mysql/Oracle/SQLServer數據庫,精通SQL語言,熟練編寫存儲過程,掌握海量數據處理及數據庫性能優化;
4、熟悉Hadoop大數據技術框架及相關技術;
數據開發工程師崗位職責 14
職位描述:
1、基于海量數據,支持業務對數據的分析和使用:
2、支持業務處理數據的流式處理、構建數據倉庫、分析用戶行為等。
任職要求:
1、有扎實的編程能力,有優秀的設計和代碼品位,對解決具有挑戰性問題充滿激情;
2、對大數據處理有豐富的`經驗和廣闊的視野;
3、熟悉常用的開源組件:hadoop/hive/spark/storm,并了解其特性和使用場景;
4、優秀的溝通理解能力,能快速理解業務,用數據解讀業務;
5、推薦或機器學習相關的開發工作優先。
數據開發工程師崗位職責 15
1、分析需求,根據需求確定技術方案,設計系統架構,編寫相關設計文檔;
2、根據項目進度計劃完成軟件編碼和集成測試;
3、指導初中級工程師的設計編碼;
4、積極響應客戶需求并進行定制化開發和交付;
5、協助處理其他部門完成技術性事項;
數據開發工程師崗位職責 16
職責:
1、負責公司大數據平臺建設;
2、根據業務需求,制定數據倉庫和數據分析平臺的實施和持續更新;
3、攻克技術難關,保證大數據系統的`穩定運行;
4、完成大數據產品的開發。
職位要求:
1、計算機相關專業全日制專科及以上學歷,大數據相關經驗;
2、熟悉Java或Scala語言,熟悉Spark,Hadoop,Kafka,Hive,HBase,ZooKeeper等大數據相關技術;
3、精通SQL語句并對Redis,Mongodb等NoSQL數據庫有一定經驗;
4、對于高并發、高穩定可用性、性能、大數據處理有過實際項目產品經驗者優先;
5、責任心強,工作踏實,有團隊協作精神,溝通能力強者優先。
數據開發工程師崗位職責 17
職責:
1、參與需求調研,負責開展專項業務分析,數據開發工作;
2、負責數據支撐工作,從事數據庫開發,報表設計和實現;
3、負責相關數據庫設計的編寫等工作;
4、參與項目的實施,負責數據結果提交、測試反饋與優化;
5、運營及決策提供業務分析及數據支持;
6、參與建立采集、轉換、整合數據,與展現開發報表分析的數據設計流程,并應用于實際操作中。
任職資格:
1、本科以上學歷,計算機相關專業,掌握SQL語言,至少熟練使用過Sybase、DB2、Oracle等其中一種數據庫;
2、熟悉ETL的`概念和流程,至少熟練使用過一種ETL工具(odi,informatica,kettle等);
3、系統學習過數據庫原理,對關系模型設計有一定認識更佳,熟練具備SQL語言、存儲過程的編寫能力;
4、良好的邏輯思維能力,敏銳的數據洞察力,較強的總結歸納能力;
5、持有OCP認證、OCM、數據庫工程師、SPSS、SAS、CDA任意一種證書者優先;
6、熟悉db2和sybase者加分,有會計或審計經驗者加分。
數據開發工程師崗位職責 18
職責:
1、完成軟件的設計、開發、測試、修改bug等工作。
2、撰寫相關的技術文檔。
3、參與業務需求的溝通,功能模塊詳細設計,業務功能實現與單元測試,系統維護等工作。
4、對代碼質量如執行性能、可讀性、可維護性負責
5、獨立的解決和分析開發過程中的問題
6、完成上級安排的`其他臨時性工作。
崗位要求:
1、計算機相關專業專科以上。
2、精通Java語言,熟練使用MyEclipse,熟悉Linux平臺的程序開發。
3、熟悉面向對象編程原理,數據結構和算法基礎扎實。
4、熟悉J2EE相關技術,掌握Spring、Spring MVC、Mbatis/Hibernate等常用應用開發框架。
5、掌握Web前端技術,熟悉HTML、CSS、JavaScript,有JQuery、Bootstrap、Vue使用經驗者優先。
6、熟悉Mysql/Oracle等常用關系型數據庫,精通SQL,能夠對SQL進行優化。
7、了解分布式計算、NoSQL技術,有實際應用經驗者優先。
8、有Spring Boot、Spring Cloud、Git、Redis、Java8等相關使用經驗者優先。
9、思維敏捷,具備良好的表達能力和溝通能力,PMP/ACP/CSM優先。
10、工作認真負責,有強烈的責任感和吃苦耐勞精神,具有良好的團隊合作精神,具有強烈的事業心和責任感。
數據開發工程師崗位職責 19
職責:
1、負責研發PAAS開放平臺開發,完成需求分析詳細設計,spring boot基礎組件的使用和擴展開發工作;
2、負責研發PAAS平臺業務中臺,數據中臺的`研發工作,能夠準確把握業務需求,參與系統設計,負責核心代碼的實現;
3、負責帶領3-5人研發團隊,實現系統規劃需求。
任職要求
業務技能要求:
1、精通Java語言,深刻理解常用微服務組件,如Spring,Spring Boot, Spring Cloud, Mybatis;
2、熟悉Shell或者Python腳本并能在Linux環境進行開發;
3、了解常用中間件系統,如RabbitMQ,RocketMq,Redis,ZooKeeper系統等;
4、熟悉Mysql數據庫以及常見的NoSQL DB,如MongoDB等;
5、了解常用工具如Git , Jenkins, Maven 等。
數據開發工程師崗位職責 20
職責:
1、參與大數據架構的規劃設計,參與業務建模及數據化運營平臺的搭建、運維,對業務流程與大數據的結合提出建議和解決方案;
2、完成基于大數據平臺的業務項目的開發、實施和維護工作;
3、負責解決大數據平臺建設過程中的技術難點和性能調優工作;
4、參與數據倉庫設計,根據業務需求實現高效率高靈活性的查詢,數據分析,數據挖掘;
5、負責高吞吐高可用數據實時和離線采集,高并發的大數據業務架構設計
6、負責研發技術發展方向,新技術領域的探索,引入并驗證數據平臺領域新技術,提供系統效能
7、對大數據技術及開源框架充滿熱情,具有鉆研精神,能自我學習。
任職資格:
1、具有5年Java開發經驗,熟悉Spring生態,掌握Hibernate、Mybatis任意一種ORM框架,掌握Oracle、Mysql數據庫。
2、具有2年以上的大數據開發經驗,熟悉大數據、數據倉庫,分布式架構技術理論,具有大數據整體系統架構設計和實戰經驗,熟悉CDH、HDP、TDH至少一款大數據產品,有從無到有建設大數據平臺經驗者優先;
3、熟悉大數據組件的開發、搭建、維護以及性能優化;
4、較強的開發能力,必須熟練使用相關開發語言(Java/Python/Scala/Shell等),熟悉大數據生態、關系數據庫和NOSQL數據庫、Linux等相關知識,能夠獨立完成并指導初級開發人員完成大數據相關的技術實現和調優;
5、熟悉Hadoop、Hbase、Hdfs、MapReduce、Yarn、Zookeeper、Hive、Impala、Spark、Flink、Kafka、Flume、Kylin、Phoenix等組件或技術,能閱讀源碼跟蹤問題。
6、熟練掌握Spark、flink任意一種計算框架,掌握MapReduce計算框架原理,并有實際項目開發經驗。
7、熟練掌握HDFS、HBase、Kafka、Redis、Hive、Sqoop、Shell等技術和組件,熟練應用開發,必須熟悉復雜數據查詢性能調優,包括實時查詢和離線批處理查詢,服務器和生態組件的.參數優化。
8、精通高級算法并有與業務結合落地優先;
9、扎實的獨立分析問題、解決問題的能力,具備良好的需求理解能力、溝通協調能力和團隊合作精神;有很強的數據設計抽象能力,善于從復雜的數據問題中找到關鍵路徑,并且擅于跟業務團隊就業務問題進行良好的溝通,能推動業務的指標化、量化;
10、有較好的學習能力、團隊協作精神,認真細心,有強烈的責任心,愛崗敬業,有較高抗壓能力,有較好的工作穩定性。
【數據開發工程師崗位職責】相關文章:
數據庫開發工程師崗位職責02-03
數據庫開發工程師的崗位職責06-08
數據開發崗位職責02-02
數據開發工程師崗位職責(通用20篇)09-20
數據庫開發工程師崗位職責10篇05-15
數據庫開發工程師崗位職責(10篇)05-15
數據庫開發工程師的崗位職責(精選30篇)03-23
數據庫開發工程師崗位職責(精選15篇)03-10
數據庫開發工程師崗位職責15篇02-03