2. 針對智慧城市,工業互聯網等大數據應用場景提出大數據平臺技術開發方案和開發落地計劃并開展工作;
3. 指導大數據技術團隊提供并實現大數據算法平臺上各項數據接入、數據挖掘分析及數據可視化的架構設計與能力,支持解決方案實施。
4. 銜接并落實業務場景、大數據技術開發、應用架構整體解決方案的制定和執行;
5. 與高校教授合作,支撐科技技術轉換,將算法、模型等關鍵技術在大數據平臺接入,開發形成新的人工智能和機器學習算法。
6. 指導工程師進行技術驗證實現,核心技術攻關,解決開發過程中技術難題。
任職要求:
1. 具有8年及以上大數據架構設計和開發經驗;
2年及以上帶領團隊經驗;溝通能力強;碩士及以上學歷。在互聯網企業或工業企業從事大數據架構設計者優先考慮;有分布式軟件系統設計經驗、主導過大型軟件架構設計并取得過成功案例者優先考慮;
3. 熟悉整個大數據的完整處理流程,包括數據的采集、清洗、預處理、存儲、分析挖掘、機器學習和數據可視化;
4. 對大數據基礎架構和平臺有深刻理解,對大數據生態體系有深入認識,熟悉大數據平臺的各種開源項目,掌握Hive、Spark、Streaming、Storm、Kafka等數據處理核心組件;對HDFS、M/R、Yarn的原理有深入了解,掌握系統優化、資源分配與權限控制。了解數據湖Kylo和Lambda架構。
5. 熟悉Java/Python/Scala等一種或多種語言,熟悉Redis/MySQL,熟悉Linux平臺。
6. 在智慧城市“自動化,信息化,數字化,網絡化和智能化”其中一化或者多化有相關項目經驗;深入理解業務中臺、數據中臺架構理念,并具有一定的實踐經驗。