職位描述
該職位還未進行加V認證,請仔細了解后再進行投遞!
崗位職責:
1、負責數據庫Doris集群的部署;
2、負責基于Hadoop/Hive/Spark/Flink構建企業級離線/實時數據倉庫,支撐PB級數據存儲與計算;
3、設計并優化ETL流程,實現多源異構數據(如MySQL、ORACLE、Kafka)的清洗、轉換與加載;
4、參與數據中臺架構設計,開發數據服務接口(如RESTful API)供業務系統調用;
5、診斷并解決Flink實時作業出現問題,通過調整并行度或優化算子邏輯提升吞吐量;
6、保障數據中臺穩定運行,實現自動巡檢與實時告警,報表需求閉環管理,保證業務正常使用;
7、實現數據庫性能優化和高可用、災備設計方案。
任職要求:
1、本科及以上學歷,計算機科學或相關專業,有3-5年行業工作經驗;
2、精通Java/Scala/Python其中一項,熟悉Linux環境及Shell腳本編寫。
3、深入理解Hadoop生態(HDFS、YARN、Hive、Spark、Flink),掌握MapReduce/DAG計算模型
4、具備百萬級TPS場景調優經驗。
5、精通帆軟FineReport/FineBI,熟悉其數據集、參數、模板等核心功能,掌握DolphinScheduler架構,熟練使用。
6、熟悉Oracle/MySQL/Hive等數據庫,具備SQL調優能力(如索引優化、執行計劃分析)。
7、主導過至少1個PB級數據倉庫建設項目,有Spark SQL優化實戰經驗,能通過執行計劃分析解決數據傾斜問題,熟悉Doris/ClickHouse等OLAP引擎,具備列式存儲優化經驗。
1、負責數據庫Doris集群的部署;
2、負責基于Hadoop/Hive/Spark/Flink構建企業級離線/實時數據倉庫,支撐PB級數據存儲與計算;
3、設計并優化ETL流程,實現多源異構數據(如MySQL、ORACLE、Kafka)的清洗、轉換與加載;
4、參與數據中臺架構設計,開發數據服務接口(如RESTful API)供業務系統調用;
5、診斷并解決Flink實時作業出現問題,通過調整并行度或優化算子邏輯提升吞吐量;
6、保障數據中臺穩定運行,實現自動巡檢與實時告警,報表需求閉環管理,保證業務正常使用;
7、實現數據庫性能優化和高可用、災備設計方案。
任職要求:
1、本科及以上學歷,計算機科學或相關專業,有3-5年行業工作經驗;
2、精通Java/Scala/Python其中一項,熟悉Linux環境及Shell腳本編寫。
3、深入理解Hadoop生態(HDFS、YARN、Hive、Spark、Flink),掌握MapReduce/DAG計算模型
4、具備百萬級TPS場景調優經驗。
5、精通帆軟FineReport/FineBI,熟悉其數據集、參數、模板等核心功能,掌握DolphinScheduler架構,熟練使用。
6、熟悉Oracle/MySQL/Hive等數據庫,具備SQL調優能力(如索引優化、執行計劃分析)。
7、主導過至少1個PB級數據倉庫建設項目,有Spark SQL優化實戰經驗,能通過執行計劃分析解決數據傾斜問題,熟悉Doris/ClickHouse等OLAP引擎,具備列式存儲優化經驗。
工作地點
地址:和田地區策勒縣kpark四號樓16層
??
點擊查看地圖
詳細位置,可以參考上方地址信息
求職提示:用人單位發布虛假招聘信息,或以任何名義向求職者收取財物(如體檢費、置裝費、押金、服裝費、培訓費、身份證、畢業證等),均涉嫌違法,請求職者務必提高警惕。
和田地區
應屆畢業生
本科
最近更新
1437人關注
注:聯系我時,請說是在四川人才網上看到的。
