崗位職責：1、參與大數據平臺架構的整體規劃和設計；2、負責平臺的整體數據架構設計，完成從業務模型到數據模型的設計工作?；3、負責根據業務功能、業務模型，進行數據庫建模設計對調度系統，元數據系統有非常深刻的認識和理解，能解決高并發系統中的關鍵問題；4、對數據挖掘及業務開發團隊提供技術支持，協助方案規劃；5、負責技術攻關和創新技術引用，開發具有數據分析、數據挖掘能力的創新型產品；任職要求：1、精通java，熟練掌握spring、mybatis、dubbo，有豐富j2ee經驗。對框架的實現原理、使用限制、應用場合等有深入了解。有python和scala實際使用經驗更佳。2、有hadoop和spark實際開發經驗。了解大數據組件的使用限制和應用場景，如hdfs,yarn,hbase,hive,flume,kafka,zk,impala,kylin,kudu,ES等。讀過spark源碼更佳。3、熟悉mysql、ElasticSearch、Redis等關系型或NoSQL，了解應用場景和使用限制。有實際調優經驗者更佳。4、熟悉linux常用命令，有實際CDH或HDP或apache版本的hadoop部署經驗者優先。5、英文文檔閱讀無障礙。6、熟練掌握常用設計模式。7、熟練使用maven、git8、熟悉JVM運行時區域及各GC算法的使用場景，有使用相應工具進行JVM及集群調優經驗。9、有實際建模經驗，熟悉數據倉庫建模。10、開源項目committer，請提交對應issue?鏈接。11、追求devops者更佳。我們的挑戰：1、近實時?窗口?處理100T?+?5T?/day的數據。2、通過Restful服務暴露統計的或原始的數據。