公司名稱:某知名互聯(lián)網(wǎng)公司
工作地點(diǎn):上海,杭州
工作職責(zé):
負(fù)責(zé)大數(shù)據(jù)平臺(tái)的構(gòu)建
大數(shù)據(jù)相關(guān)前沿技術(shù)、運(yùn)用調(diào)研及落地
負(fù)責(zé)數(shù)據(jù)開(kāi)發(fā)工作,包括數(shù)據(jù)倉(cāng)庫(kù)以及數(shù)據(jù)應(yīng)用的技術(shù)設(shè)計(jì)和開(kāi)發(fā)
任職要求:
良好的SQL 編寫及優(yōu)化能力
熟悉至少一種任務(wù)調(diào)度框架,如airflow , DolphinSchedule
熟悉Hadoop系大數(shù)據(jù)組件、工具的原理,能熟練使用Hive、Spark、Flink等大數(shù)據(jù)開(kāi)發(fā)工具
熟悉Linux開(kāi)發(fā)環(huán)境,熟悉shell,扎實(shí)的數(shù)據(jù)結(jié)構(gòu)和算法功底
3年及以上大數(shù)據(jù)技術(shù)工作經(jīng)驗(yàn)
熟悉Java, Scala開(kāi)發(fā)語(yǔ)
熟悉SpringBoot