職位描述
數(shù)據(jù)挖掘ETL數(shù)據(jù)庫(kù)開發(fā)SqlJavaPython
崗位職責(zé)：
1.數(shù)據(jù)管道搭建與維護(hù),設(shè)計(jì)、開發(fā)和維護(hù)高效、可靠的數(shù)據(jù)管道（ETL/ELT）;數(shù)據(jù)處理與優(yōu)化,負(fù)責(zé)數(shù)據(jù)清洗、轉(zhuǎn)換、聚合與預(yù)處理，確保數(shù)據(jù)質(zhì)量與一致性,
2,數(shù)據(jù)工具與平臺(tái)支持,保證實(shí)時(shí)數(shù)據(jù)管道的穩(wěn)定運(yùn)行;數(shù)據(jù)治理與安全合規(guī),確保數(shù)據(jù)處理過程中的安全性、合規(guī)性和治理要求滿足,
3.協(xié)助分析與建模團(tuán)隊(duì),與數(shù)據(jù)分析師、數(shù)據(jù)科學(xué)家密切合作，為他們提供高質(zhì)量、易用的數(shù)據(jù)源和計(jì)算平臺(tái),
4.承擔(dān)部分?jǐn)?shù)據(jù)分析任務(wù)，可以構(gòu)建分析及預(yù)測(cè)數(shù)學(xué)模型，解決客戶實(shí)際問。
任職要求：
1.本科及以上學(xué)歷，大數(shù)據(jù)分析、統(tǒng)計(jì)學(xué)、數(shù)學(xué)、計(jì)算機(jī)與科學(xué)等相關(guān)專業(yè)，年齡在35周歲以下（含）；
2.具有3年及以上大數(shù)據(jù)開發(fā)、數(shù)據(jù)工程或相關(guān)領(lǐng)域從業(yè)經(jīng)驗(yàn)，有大規(guī)模數(shù)據(jù)處理與優(yōu)化案例；
3.熟悉Hadoop生態(tài)體系技術(shù)，包括但不限于HDFS、MR、Yarn、Hive、HBase、ZK、Oozie、Hue、Impala、Spark、Flink；
4.熟悉java、Scala、Python、Shell中至少2門以上語言開發(fā)。
5.熟悉大數(shù)據(jù)生態(tài)中其他開源技術(shù)棧，如Doris、Greenplum、ElasticSeach、Redis、ClickHouse等；
6.對(duì)云平臺(tái)（AWS、GCP、Azure）有所了解，會(huì)使用Docker、Kubernetes等容器與編排技術(shù)優(yōu)先
7.業(yè)務(wù)理解能力強(qiáng)，學(xué)習(xí)能力強(qiáng)，可以較快的學(xué)習(xí)相關(guān)前沿技術(shù)并落地到公司實(shí)際業(yè)務(wù)場(chǎng)景；
8.良好的團(tuán)隊(duì)合作精神，良好的溝通能力和認(rèn)真負(fù)責(zé)的工作態(tài)度；
1.數(shù)據(jù)管道搭建與維護(hù),設(shè)計(jì)、開發(fā)和維護(hù)高效、可靠的數(shù)據(jù)管道（ETL/ELT）;數(shù)據(jù)處理與優(yōu)化,負(fù)責(zé)數(shù)據(jù)清洗、轉(zhuǎn)換、聚合與預(yù)處理，確保數(shù)據(jù)質(zhì)量與一致性,
2,數(shù)據(jù)工具與平臺(tái)支持,保證實(shí)時(shí)數(shù)據(jù)管道的穩(wěn)定運(yùn)行;數(shù)據(jù)治理與安全合規(guī),確保數(shù)據(jù)處理過程中的安全性、合規(guī)性和治理要求滿足,
3.協(xié)助分析與建模團(tuán)隊(duì),與數(shù)據(jù)分析師、數(shù)據(jù)科學(xué)家密切合作，為他們提供高質(zhì)量、易用的數(shù)據(jù)源和計(jì)算平臺(tái),
4.承擔(dān)部分?jǐn)?shù)據(jù)分析任務(wù)，可以構(gòu)建分析及預(yù)測(cè)數(shù)學(xué)模型，解決客戶實(shí)際問。
任職要求：
1.本科及以上學(xué)歷，大數(shù)據(jù)分析、統(tǒng)計(jì)學(xué)、數(shù)學(xué)、計(jì)算機(jī)與科學(xué)等相關(guān)專業(yè)，年齡在35周歲以下（含）；
2.具有3年及以上大數(shù)據(jù)開發(fā)、數(shù)據(jù)工程或相關(guān)領(lǐng)域從業(yè)經(jīng)驗(yàn)，有大規(guī)模數(shù)據(jù)處理與優(yōu)化案例；
3.熟悉Hadoop生態(tài)體系技術(shù)，包括但不限于HDFS、MR、Yarn、Hive、HBase、ZK、Oozie、Hue、Impala、Spark、Flink；
4.熟悉java、Scala、Python、Shell中至少2門以上語言開發(fā)。
5.熟悉大數(shù)據(jù)生態(tài)中其他開源技術(shù)棧，如Doris、Greenplum、ElasticSeach、Redis、ClickHouse等；
6.對(duì)云平臺(tái)（AWS、GCP、Azure）有所了解，會(huì)使用Docker、Kubernetes等容器與編排技術(shù)優(yōu)先
7.業(yè)務(wù)理解能力強(qiáng)，學(xué)習(xí)能力強(qiáng)，可以較快的學(xué)習(xí)相關(guān)前沿技術(shù)并落地到公司實(shí)際業(yè)務(wù)場(chǎng)景；
8.良好的團(tuán)隊(duì)合作精神，良好的溝通能力和認(rèn)真負(fù)責(zé)的工作態(tài)度；
工作地點(diǎn)
碧興物聯(lián)科技(深圳)股份有限公司匯智研發(fā)中心
相似職位
- 數(shù)據(jù)開發(fā)工程師2萬-2.5萬
深圳 - 南山
北京耐思云科技有限公司 - 大數(shù)據(jù)開發(fā)工程師1.5萬-2.5萬
深圳 - 南山
淘禮禮貿(mào)易(深圳)有限公司 深圳 - 福田
深圳華云信息系統(tǒng)科技股份有限公司- 大數(shù)據(jù)開發(fā)工程師(全額公積金）1.2萬-1.6萬
深圳 - 福田
深圳市睿服科技有限公司 深圳 - 福田
深圳市法本信息技術(shù)股份有限公司- 數(shù)據(jù)開發(fā)工程師1.1萬-1.8萬
深圳 - 南山
北京銀信長(zhǎng)遠(yuǎn)科技股份有限公司深圳分公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長(zhǎng)城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
胡明存/人事專員
當(dāng)前在線立即溝通
碧興物聯(lián)科技(深圳)股份有限公司碧興物聯(lián)（科創(chuàng)板：688671）是上海證券交易所上市公司，自1999年進(jìn)入自動(dòng)監(jiān)測(cè)行業(yè)，是國(guó)內(nèi)最早從事環(huán)境自動(dòng)監(jiān)測(cè)領(lǐng)域開發(fā)的國(guó)家高新技術(shù)骨干企業(yè)之一。自成立至今，碧興物聯(lián)始終專注于科學(xué)儀器及大數(shù)據(jù)領(lǐng)域的自主研發(fā)，致力于構(gòu)建萬物感知、萬物互聯(lián)的多行業(yè)智慧化應(yīng)用與服務(wù)，為國(guó)家生態(tài)環(huán)境、水利和公共安全建設(shè)提供強(qiáng)力技術(shù)支撐。目前主營(yíng)業(yè)務(wù)涉及：智能環(huán)境監(jiān)測(cè)設(shè)備、環(huán)境監(jiān)測(cè)物聯(lián)網(wǎng)與生態(tài)環(huán)境大數(shù)據(jù)、智慧水務(wù)、數(shù)字農(nóng)業(yè)、公共安全等領(lǐng)域的研發(fā)、生產(chǎn)和技術(shù)服務(wù)。碧興物聯(lián)擁有一支行業(yè)領(lǐng)先的創(chuàng)新研發(fā)隊(duì)伍，始終堅(jiān)持以行業(yè)前沿、國(guó)際視野的高視角進(jìn)行技術(shù)和產(chǎn)品創(chuàng)新。公司實(shí)現(xiàn)了從感知層到數(shù)據(jù)層，再到行業(yè)智慧應(yīng)用層的數(shù)字化全產(chǎn)業(yè)鏈，為公司進(jìn)一步拓寬儀器開發(fā)及數(shù)字化技術(shù)行業(yè)應(yīng)用奠定了堅(jiān)實(shí)基礎(chǔ)。作為一家科技創(chuàng)新型國(guó)家級(jí)專精特新“小巨人”企業(yè)，公司已建立兩個(gè)省級(jí)工程技術(shù)研究中心，擁有數(shù)百項(xiàng)自主知識(shí)產(chǎn)權(quán)，獲得四項(xiàng)省部級(jí)科技獎(jiǎng)項(xiàng)，并多次在國(guó)家重大科研項(xiàng)目中擔(dān)當(dāng)重任，實(shí)現(xiàn)了公司戰(zhàn)略與國(guó)家發(fā)展戰(zhàn)略的有機(jī)統(tǒng)一。近年來，碧興物聯(lián)依靠卓越的產(chǎn)品品質(zhì)與服務(wù)，獲得了眾多客戶的青睞，實(shí)現(xiàn)了快速發(fā)展。作為國(guó)內(nèi)生態(tài)環(huán)境監(jiān)測(cè)及數(shù)字化應(yīng)用領(lǐng)域的領(lǐng)軍企業(yè)，碧興物聯(lián)的產(chǎn)品技術(shù)已廣泛應(yīng)用于國(guó)家、省市及企業(yè)數(shù)百個(gè)行業(yè)重點(diǎn)項(xiàng)目，成為國(guó)內(nèi)生態(tài)環(huán)境、水利/水務(wù)與公共安全領(lǐng)域數(shù)字感知最具競(jìng)爭(zhēng)力的企業(yè)之一。放眼未來，碧興物聯(lián)將繼續(xù)秉持“奮斗為基，創(chuàng)新為力；誠(chéng)信共贏，追求卓越”的立業(yè)理念，進(jìn)一步拓展智慧水利、數(shù)字農(nóng)業(yè)、數(shù)字生態(tài)等數(shù)字化行業(yè)應(yīng)用市場(chǎng)；同時(shí)，在現(xiàn)有創(chuàng)新基礎(chǔ)上，加強(qiáng)在醫(yī)療儀器、新能源設(shè)備等新興領(lǐng)域科學(xué)儀器創(chuàng)新探索。公司將百倍努力，用最好的業(yè)績(jī)回報(bào)社會(huì)、國(guó)家及股東，在全球視野中彰顯中國(guó)企業(yè)的創(chuàng)新力量。
公司主頁(yè)