2. 針對智慧城市,工業(yè)互聯(lián)網等大數據應用場景提出大數據平臺技術開發(fā)方案和開發(fā)落地計劃并開展工作;
3. 指導大數據技術團隊提供并實現大數據算法平臺上各項數據接入、數據挖掘分析及數據可視化的架構設計與能力,支持解決方案實施。
4. 銜接并落實業(yè)務場景、大數據技術開發(fā)、應用架構整體解決方案的制定和執(zhí)行;
5. 與高校教授合作,支撐科技技術轉換,將算法、模型等關鍵技術在大數據平臺接入,開發(fā)形成新的人工智能和機器學習算法。
6. 指導工程師進行技術驗證實現,核心技術攻關,解決開發(fā)過程中技術難題。
任職要求:
1. 具有8年及以上大數據架構設計和開發(fā)經驗;
2年及以上帶領團隊經驗;溝通能力強;碩士及以上學歷。在互聯(lián)網企業(yè)或工業(yè)企業(yè)從事大數據架構設計者優(yōu)先考慮;有分布式軟件系統(tǒng)設計經驗、主導過大型軟件架構設計并取得過成功案例者優(yōu)先考慮;
3. 熟悉整個大數據的完整處理流程,包括數據的采集、清洗、預處理、存儲、分析挖掘、機器學習和數據可視化;
4. 對大數據基礎架構和平臺有深刻理解,對大數據生態(tài)體系有深入認識,熟悉大數據平臺的各種開源項目,掌握Hive、Spark、Streaming、Storm、Kafka等數據處理核心組件;對HDFS、M/R、Yarn的原理有深入了解,掌握系統(tǒng)優(yōu)化、資源分配與權限控制。了解數據湖Kylo和Lambda架構。
5. 熟悉Java/Python/Scala等一種或多種語言,熟悉Redis/MySQL,熟悉Linux平臺。
6. 在智慧城市“自動化,信息化,數字化,網絡化和智能化”其中一化或者多化有相關項目經驗;深入理解業(yè)務中臺、數據中臺架構理念,并具有一定的實踐經驗。