職位描述
該職位還未進行加V認證,請仔細了解后再進行投遞!
崗位職責:
1、負責數(shù)據(jù)開發(fā)與治理平臺的設計、開發(fā)與持續(xù)優(yōu)化,推動數(shù)據(jù)存儲組件云原生化,支持 PB 級別數(shù)據(jù)存儲需求。
2、積極探索并應用 Data Agent 及其他基于 AI 大模型的大數(shù)據(jù)開發(fā)治理解決方案,推動智能化數(shù)據(jù)治理場景的落地。
3、推動 JuiceFS 在 AI 和大數(shù)據(jù)場景中的應用與落地,基于 JuiceFS 構(gòu)建存算分離的大數(shù)據(jù)平臺架構(gòu)。
4、深入研究并落地數(shù)據(jù)湖相關(guān)技術(shù),開展行業(yè)趨勢調(diào)研、技術(shù)選型及組件存算分離架構(gòu)的設計與實現(xiàn)。
5、負責數(shù)據(jù)建模、離線與實時數(shù)據(jù)開發(fā)、數(shù)據(jù)治理等大數(shù)據(jù)治理平臺核心模塊的設計、開發(fā)與維護。
6、負責多模態(tài)數(shù)據(jù)加工處理,包括結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)的統(tǒng)一元數(shù)據(jù)存儲與統(tǒng)一加工,提升數(shù)據(jù)治理平臺的多樣性和智能化能力。
任職資格:
1、本科及以上學歷,5 年及以上大數(shù)據(jù)領(lǐng)域工作經(jīng)驗,具備豐富的大數(shù)據(jù)治理平臺研發(fā)背景。
2、具備 Data Agent 或其他基于 AI 大模型落地數(shù)據(jù)治理場景的實際經(jīng)驗者優(yōu)先。
3、精通 Java/Python 編程語言,熟悉 Spring Boot 等主流服務端開發(fā)框架,熟悉 Kubernetes 架構(gòu)及運維操作。
4、熟悉 DataWorks、網(wǎng)易數(shù)帆等主流數(shù)據(jù)開發(fā)與治理平臺,有相關(guān)平臺開發(fā)經(jīng)驗者優(yōu)先。
5、熟悉 Hadoop、JuiceFS、Spark、Flink、Doris、Airflow、Kafka 等大數(shù)據(jù)組件原理,具備獨立故障排查與解決能力。
6、熟悉 Datahub、Atlas 等元數(shù)據(jù)管理系統(tǒng),有元數(shù)據(jù)管理系統(tǒng)開發(fā)經(jīng)驗者優(yōu)先。
7、熟悉 Paimon、Hudi、Iceberg 等數(shù)據(jù)湖技術(shù),有湖倉一體架構(gòu)開發(fā)經(jīng)驗者優(yōu)先。
8、具備多模態(tài)數(shù)據(jù)加工處理經(jīng)驗,能夠?qū)崿F(xiàn)結(jié)構(gòu)化與非結(jié)構(gòu)化元數(shù)據(jù)的統(tǒng)一存儲與統(tǒng)一加工。
9、具備強烈的責任心與自驅(qū)力,良好的溝通與團隊協(xié)作能力,工作積極主動,勇于挑戰(zhàn)高難度任務。
工作地點
地址:杭州濱江區(qū)杭州-濱江區(qū)杭州高新區(qū)火炬創(chuàng)新中心6樓
求職提示:用人單位發(fā)布虛假招聘信息,或以任何名義向求職者收取財物(如體檢費、置裝費、押金、服裝費、培訓費、身份證、畢業(yè)證等),均涉嫌違法,請求職者務必提高警惕。
職位發(fā)布者
HR
聚好看科技股份有限公司
-
家電業(yè)
-
200-499人
-
股份制企業(yè)
-
嶗山區(qū)松嶺路339號海信研發(fā)中心
相似職位
-
咖啡機工程師 面議濱江區(qū) 應屆畢業(yè)生 不限杭州羽嬉貿(mào)易有限公司
-
大堂吧領(lǐng)班(J10233) 面議蕭山區(qū) 應屆畢業(yè)生 中技杭州國際博覽中心有限公司
-
達播BD 20000-30000元拱墅區(qū) 3年以上 本科華東醫(yī)藥股份有限公司
-
質(zhì)量經(jīng)理 8000元以上臨安區(qū) 應屆畢業(yè)生 不限華東醫(yī)藥股份有限公司
-
分析研究員(理化/表征) 10000-15000元拱墅區(qū) 2年以上 碩士華東醫(yī)藥股份有限公司
-
QC理化分析師(儀器分析方向) 面議拱墅區(qū) 3年以上 本科華東醫(yī)藥股份有限公司
應屆畢業(yè)生
本科
2025-09-30 13:45:48
550人關(guān)注
注:聯(lián)系我時,請說是在杭州人才網(wǎng)上看到的。
