崗位職責:
1、負責公司大(dà)數據應用産品的平台搭建件東、架構優化、技術叠代和開(kāi)發維護,提供穩定遠人的大(dà)數據平台服務;構建數據存儲、數據門書挖掘、數據計算及數據服務于一體的大(dà術件)型分布式數據平台;
2、負責構建和維護算法平台,對海量數據進行離線計算、實時(s拿妹hí)計算等分析挖掘;協同數據分析師,根據業務場景設房舞計并實現數據模型和服務模型,并跟進和評估模型效果,确保算法和模型的有效落地;
3、負責整理和沉澱技術文檔,指導下級開(kāi內很)發人員。
任職要求:
1、計算機或相關專業本科(kē)及以上學曆,3年以上相關工(gō門討ng)作經驗;
2、掌握操作系統、網絡、數據結構和算法等專業知市也識;
3、精通(tōng)Java/Scala/Python 其中一門語言,熟悉費懂Linux/Unix開(kāi)發環境;
4、具備一定的大(dà)型分布式系統開(k外玩āi)發經驗,精通(tōng)大(dà)數據平台技術架構舞厭設計和Hadoop體系相關技術,掌握Hive、HBase、Spar這街k、YARN、MapReduce等大(dà)數據開費暗(kāi)發技術;
5、掌握實時(shí)數據分析或離線數據挖掘技術框的老架,如(rú):Spark Streaming,Kafka,Spar器間k SQL等,熟練掌握常見的SQL/NoSQL數據庫原理、數據庫設計,尤其對水飛數據存儲、查詢的原理及優化具備較深入的理解;
6、具備良好(hǎo)的團隊協作能力和分享精神,具有較強的問題分析能力和解費南決能力。