講師簡介
教育背景:
2005.09—2008.02 中國農業大學信電學院 自動化碩士
2001.09—2005.07 中國農業大學信電學院 工學學士
從業經歷:
2008年到2013年,從事軟件開發工作,歷任軟件工程師,高級工程師,部門經理。
2014年合伙成立北京盛和大地數據科技有限公司,擔任公司CTO).公司致力于開發全生命周期的大數據存儲,以及大數據平臺產品,目前集中在運營商、金融、歸檔等行業和業務方向。
近期研發項目經驗:
某超級計算機集群二級數據備份系統項目
某涉密單位OA系統數據平臺項目
廣東氣象局數據分析平臺項目
中國地質調查局數據備份系統項目
廣電總局東莞多媒體數據中心數據備份系統項目
國家電網電商部門,第三方電子支付平臺數據庫架構升級方案,包括支付平臺和數據庫
近期培訓和咨詢內容:
廣東電信研究院
大數據平臺優化及開發應用實戰,通過十多天的大數據培訓和咨詢工作,提升電信網絡運維及開發團隊的大數據應用實踐能力,優化了多個數據分析應用軟件的性能,提升了大數據平臺的穩定性,提高了客戶滿意度。
江蘇某大型國有銀行
銀行客戶的大數據平臺應用培訓,通過三個多月的大數據培訓和咨詢工作,提升銀行客戶管理團隊的運維和開發能力,上線了一批新的數據分析和數據挖掘應用,有效提升了大數據平臺的穩定性和易用性。
工作任務:
1.新員工技術培訓營
通過編程語言基礎、自動化運維技術、虛擬化技術等課程的理論和實戰課程,以及考核比賽環節,使新員工具備了崗位所需的研發和運維能力
2.數據分析和挖掘培訓
引入第三方的數據分析平臺軟件后,通過階段性組織數據分析平臺應用開發能力培訓,以及實踐問題分析研究討論會議,提升數據分析平臺使用水平,而且,基于常見問題形成了相關知識庫。(另外,也組織了開發培訓,包括傳統的數據分析軟件SAS/SPSS/Excel,以及新的開發語言 R語言和Python)
3.大數據平臺引入和調優
大數據平臺是從第三方廠家引入的,配置參數、虛擬資源池工作模式等需要根據實際需要進行調優。通過逐步引入數據分析和挖掘任務,對產生的資源瓶頸和出現的故障等問題進行案例分析和討論研究,以階段性實踐的方式提升運維團隊和數據分析團隊的技術能力。
4.團隊協作
在新團隊磨合過程中,凸現出部門樊籬文化的問題,部門之間協調配合緊密度不強,步調往往不一致,對整體工作效率有負面影響。對此,以Devops為基礎,結合公司內部已經在使用的Devops平臺產品,組織了部門工作流程管理的系列培訓。
四川移動
大數據分析和應用(數據分析,數據挖掘,深度學習以及人工智能),通過兩周的大數據實戰培訓,提升移動數據團隊的大數據開發實踐水平,并將相關技術應用到了四川移動數據分析的內部示范平臺。
南京南瑞
南瑞電力數據管理平臺優化,通過一個多月的培訓和咨詢工作,提升了電力數據管理平臺的運算性能,提高了開發和運維團隊的數據分析和平臺管理能力。引入了深度學習和人工智能技術,引導開發了“智慧電網”的相關應用。有效提升了電力數據平臺的業務水平。
中國移動設計研究院
大型電商網站設計和優化,通過培訓和咨詢工作,使網站架構能夠適應在用戶數量快速提升的同時保持高可用,提高了開發和運維團隊對于海量用戶和海量數據的處理能力。引入了去中心化集群技術和跨域資源調度技術,提高了電商網站的可靠性和可維護性。
項目方案要點:
1.客戶端優化,統一平臺入口,消減內部系統業務連接數量
2.應用CDN技術,靜態資源本地化
3.對商品展示資源應用多級數據緩存
4.對業務進行分級,在高峰留戀沖擊下,會觸發對非關鍵業務資源的限制,動態釋放給核心業務。
5. 去中心化。構建機架內的高可用,以及數據中心級別的高可用。
項目實施情況:
1.通過藍軍部門設計的流量沖擊模擬測試和局部故障測試。
2.項目上線后,經過近一個月的調適和經驗總結,系統沒有出現大的問題,達到了預期的設計要求。
3.業務上線半年后,啟動了進一步升級擴容的計劃,目前仍在進行中。附件是培訓所使用的部分課件。
自我評價:
l 計算機水平: C++/Java,Python,Spark,Hadoop,Hive,Map-Reduce ,R, SQL
l 性格、愛好:熱愛學習,進取創新,善于交流,十分熱愛技術傳播工作。