大數據浪潮席卷全球,應用領域寬廣,產業規模空前,
就業口徑寬廣,價值堪比黃金石油,“錢途”無量
大千鋒與京東物流合作共建課程體系,企業熱門技術全方位涵蓋,
融入真實項目案例和工程實踐創新。
京東物流合作共建課程
掌握大廠一線剛需
拓展京東物流實戰項目案例
大數據技術專家親授
大數據+數據智能助力學員高起點職業路徑,定位P5-P7級數據開發工程師培養,
學員跳過初中級大數據工程師,直接勝任大數據研發部門Leader相關崗位
千鋒好程序員大數據+數據智能,與京東物流大廠合作共建大數據技術領域的實戰型前瞻深度課程,
對大廠熱門技術及項目進行系統、深度的研發和建設,形成獨特的教研壁壘
掌握萬能的JavaSE開發、大數據必知必會的MySQL、Linux和Shell腳本以及基于Springboot的數據服務研發。
Java研發工程師、系統運維工程師、數據庫工程師。
Java基礎、集合、線程、IO流、面向對象、MySQL DDL|DML |DQL、索引、JDBC、Linux文件系統命令、軟件安裝、Shell腳本編程。
基于Restful風格的數據服務項目、數據可視化項目。
離線數據工程師、數據倉庫工程師、ETL工程師、數據采集工程師、數據支持工程師、
BI商業分析師、數據可視化工程師、Hadoop工程師、Spark工程師。
數據服務開發、離線數據倉庫開發、BI商業分析
Java、MySQL、Maven、Git、OpenResty、Linux、Shell、HDFS、YARN、
Zookeeper、MapReduce、Scala、Python、SparkCore、Hive、SparkSQL、
Presto、Sqoop、DataX、Flume、CDH、數倉架構、維度建模、SuperSet、
Azkaban、Airflow等。
數據服務、大數據可視化、企業級Hadoop基建項目部署、分布式網絡爬蟲、基于Spark
的大數據分析項目、ETL項目之Hive和SparkSQL、BI商業分析等。
掌握流數據接入、基于Flink實時數據開發、流批一體數據倉庫開發、數據湖開發、實時ETL、實時監控系統和京東實時數據開發。
實時工程師、Flink工程師、實時數據倉庫工程師、實時ETL工程師、Spark工程師
Kafka、Structured Streaming、Hudi、Canal、Flink、ClickHouse、HBase、Phoenix、Elasticsearch、Redis。
實時監控系統、基于Flink的實時數據開發、實時數據湖、大數據搜索系統。
掌握企業項目開發流程、用戶畫像開發、企業級推薦系統開發、數據治理、基于生產環境項目部署和京東項目性能調優。
數據服務工程師、離線數據倉庫開發工程師、BI商業分析師、實時數據倉庫工程師、實時監控系統工程師、ETL工程師、數據可視化工程師、數據治理工程師、高級數據開發工程師、推薦工程、數據平臺工程師、數據架構師
數據采集與監控平臺、準實時數據倉庫、用戶畫像、推薦系統、基于Flink的實時數據倉庫、元數據管理與數據治理。
京東物流大數據項目案例,多領域、全類目、企業級
大型實戰項目貫穿課程始終,一切為了學員實戰能力
數據源頭多且是分散,除業務庫,APP 埋點,web網站 log,
LOT 設備等會產生各種各樣的海量數據,這些數據進入數據
倉庫之,需要進行統一,數據集成在一起。離線數倉的ETL,
涵蓋數據的抽取轉換與加載。
在數據倉庫中構建模型,從數據源中抽取數據,然后對這些
數據進行轉化,最終加載到目標數據庫或者數據倉庫中去,
實現離線數倉ETL過程。
企業信息化發展,對 ETL 過程、存儲都提出更高的要求。互聯網在線特性對實時性提出了要求: 如用戶反欺詐、用戶審核等隨著用戶的暴漲。實時數據開發,主要是對由用戶行為、 業務行為等產生的巨大量數據進行實時處理,并應用到生產中。
實時數倉的存儲考慮支持數據重放,方便支持任務重跑。選擇一個具有重放功能的、能夠保存歷史數據并支持多消費者的消息隊列,根據需求設置歷史數據保存的時長,通過實時數據開發,建成實時數倉、實時指標等,支撐企業鏈路的實時化。
大數據采集與指標監控項目是基于第一階段和第二階段課程,貫穿離線數據上報、數據儲存、數據服務監控、數據分析等全套流程。整個項目包括Flume自定義攔截器代碼、自定義Azkaban監控代碼和SQL相關指標代碼開發。
解決離線數據上報流程,數據采集操作,flume和azkaban的二次開發,數據服務監控,離線數據開發流程。
HDFS+Flume+Sqoop+數倉思想+Spark SQL/Hive+Azkaban+Python+Shell+Superset大數據離線數倉解決方案。
1.采集和同步架構組件采用: Sqoop+Flume
2.數倉架構組件采用:HDFS+SparkSQL/Hive
3.任務調度架構采用:Azkaban+Python/Shell
4.涉及到數倉思想: 分層+建模+維度+粒度+拉鏈+增量/全量+數據質量等
5.本項目中的BI工具: Superset
準實時數倉是一個集流式數據集成,數據分析、DAU預測和數據應用的數倉型項目。整個項目架構為Nginx+OpenResty+Kafka+Spark+Presto等技術構成。
解決事件行為分析、解決企業留存分析、解決漏斗分析、解決DAU預測及數據服務提供。
用戶畫像是基于數倉之上的項目,主要解決畫像標簽服務,比如人群圈定服務和相似用戶搜索服務等。同時標簽的處理使用Word2Vec、TF-IDF、HanLP分詞等技術。
解決企業人群圈定、解決相似用戶搜索。
專家垂直賦能,深耕核心技術
京東物流數據開發工程師
miniBDP系統架構設計及主要開發者
數據開發經驗豐富
對BDP系統開發有多年經驗
參與多個miniBDP項目
負責部署實施及相關開發工作
京東健康大數據開發工程師
某電信公司帳詳單流式計算系統架構者與主要開發者
數據ETL經驗豐富
千億級數據處理經驗
流式開發和批處理開發經驗豐富。
千鋒好程序員師資篩選自千鋒百人教研團隊及
互聯網一線大廠核心技術人才,5維嚴選錄取率僅1%
好程序員大數據學科主管 | 原鳳凰網高級軟件工程師
從事企業軟件研發工作7年,從事大數據講師5年,
有豐富的軟件設計、軟件研發、軟件管理、流程控制經驗。
曾任職鳳凰網和途牛科技等企業。
負責過旅游平臺設計、電力系統研發、
商城后臺架構和服務端架構、
商城大數據平臺搭建和研發、
數據統計分析等工作。
好程序員大數據主管 | 原上市公司技術主管
從業10年,上市公司前主管,主持開發了多款實用app,
并參與多個大型大數據項目研發工作,
精通Java,Mysql,Linux,Hadoop,Hive,Hbase,
Scala,Spark,iOS,數據倉庫等多種開發技能.
多年軟件開發經驗和教學經驗,
形成了一整套的成熟的教學體系,
總計培訓出學員6千多人,
其中眾多學員都已經是公司的骨干.
大數據高級講師 | 原上海漢詢軟件工程師
原漢詢軟件、軟通公司項目高級開發工程師,
有5年以上研發經驗,多年教學經驗,
擁有多年的離線和實時開發經驗及項目實施經驗,
精通Spark、Hadoop等生態技術棧,
對項目優化有深入研究,授課邏輯清晰,
言簡意賅,多注重于學員的自我解決問題能力。
好程序員大數據高級講師 | 環球購物高級工程師
原環球購物(電商購物)高級工程師,9年的研發與授課經驗,
精通Java、scala、C#、python等多門編程語言,
精通Hadoop、Spark等生態。
授課從易到難循序漸進,
風趣幽默,深受學員好評。
提前鎖定大廠崗位,開辟綠色求職通道
學員備受青睞,一次學習長久職業支持
優秀學員簡歷直推大廠大數據崗位面試
免去和千軍萬馬同搶職位。
與京東物流合作共建,
培養實戰型大數據架構師。
每年超20場雙選會
20000余家IT相關企業建立人才輸送合作關系。
年均1000+企業定期上門招聘
在畢業班進行人才選拔。
剖析大廠面試題重點,
提升學員大廠求職能力,規劃職業發展路線。
大廠HR深度指導,
學員職業化素養綜合提升訓練。
Copyright 2011-2023 北京千鋒互聯科技有限公司 .All Right 京ICP備12003911號-5 京公網安備 11010802035720號