數(shù)據(jù)開發(fā)工程師

崗位職責(zé)
1.負(fù)責(zé)數(shù)據(jù)采集與接入，構(gòu)建高效穩(wěn)定的數(shù)據(jù)入湖通道；
2.承擔(dān)數(shù)據(jù)模型設(shè)計(jì)、數(shù)據(jù)映射編寫，以及ETL流程的開發(fā)與性能調(diào)優(yōu)；
3.持續(xù)優(yōu)化數(shù)據(jù)處理邏輯，提升數(shù)據(jù)產(chǎn)出效率與準(zhǔn)確性；
4.參與部分業(yè)務(wù)線的BI可視化工作，協(xié)同產(chǎn)品完成數(shù)據(jù)分析支持；

任職要求：
1.熟悉mysql/Starrocks/hive/spark/Flink等大數(shù)據(jù)技術(shù)棧，具備復(fù)雜SQL編寫與優(yōu)化能力；
2.掌握Paimon、Iceberg等數(shù)據(jù)湖工具，擁有離線與實(shí)時(shí)計(jì)算開發(fā)經(jīng)驗(yàn)；
3.熟悉數(shù)據(jù)開發(fā)全流程，涵蓋數(shù)據(jù)集成、處理、調(diào)度及BI展示，了解Dolphinscheduler、QuickBI等工具；
4.熟練使用Python，可承擔(dān)數(shù)據(jù)抓取類開發(fā)任務(wù)，如爬蟲、RPA等；
5.具備良好的業(yè)務(wù)理解力，能快速把握業(yè)務(wù)需求；擁有獨(dú)立分析和解決問題的能力，責(zé)任心強(qiáng)，具備團(tuán)隊(duì)協(xié)作意識(shí)與溝通技巧；

華寶