训练营
什么是数据工程?带你了解数据工程师的职能
play46:46

掌握

数据工程全栈项目班

大数据+团队合作项目+实习推荐机会

澳洲第一个面向企业的数据工程师培训,掌握大数据整个流程

通过三个项目加强数据工程技术栈学习,个人项目+团队项目

什么是数据工程?带你了解数据工程师的职能
play46:46
feature一个团队项目和两个个人项目
feature包含数据工程师必备技能
feature一线大厂大师解答课程问题
feature获得“云大数据技术”
starstar
starstar
starstar

我们的数据工程全栈项目班校友现在工作在

starstar
https://jr-image.s3.amazonaws.com/trainings/employedAt/eade9225b8cbe8d3890deb5b1ef66b7f.webphttps://jr-image.s3.amazonaws.com/trainings/employedAt/6353de92014e59c2b8765fd9106a1592.webphttps://jr-image.s3.amazonaws.com/trainings/employedAt/96339b5a05054f78df9bfcfa55aa5040.webphttps://jr-image.s3.amazonaws.com/trainings/employedAt/d1ba003686528c7d904165e1c94420f7.webphttps://jr-image.s3.amazonaws.com/trainings/employedAt/7d4249919a96d933d593cb3c7c2a91c4.webphttps://jr-image.s3.amazonaws.com/trainings/employedAt/753f232daf3d6892c839065202815aac.webphttps://jr-image.s3.amazonaws.com/trainings/employedAt/3feade09178b85e1986bfae58609f9a1.webp
https://jr-image.s3.amazonaws.com/trainings/employedAt/eade9225b8cbe8d3890deb5b1ef66b7f.webp
https://jr-image.s3.amazonaws.com/trainings/employedAt/6353de92014e59c2b8765fd9106a1592.webp
https://jr-image.s3.amazonaws.com/trainings/employedAt/96339b5a05054f78df9bfcfa55aa5040.webp
https://jr-image.s3.amazonaws.com/trainings/employedAt/d1ba003686528c7d904165e1c94420f7.webp
https://jr-image.s3.amazonaws.com/trainings/employedAt/7d4249919a96d933d593cb3c7c2a91c4.webp
https://jr-image.s3.amazonaws.com/trainings/employedAt/753f232daf3d6892c839065202815aac.webp
https://jr-image.s3.amazonaws.com/trainings/employedAt/3feade09178b85e1986bfae58609f9a1.webp

数据工程全栈项目班亮点

star简历增添三个项目,2 个个人项目,1 个团队大项目,你的简历超过同辈同学
star中澳就业两手抓,大数据时代,需求量最大的岗位,成为大数据工程师,拿高薪,迎接未来AI时代
star结合AWS+DevOps,结合AWS云技术,与DevOps Engineer配合,加强数据工程师工程化能力
star导师+Tutor答疑团,导师和Tutor全程答疑,Lecture+Tutorial,深度挖掘数据工程内容

为什么选择数据工程全栈项目班

1769b21606c8fa937492eb3b670ff1e1.png

大数据是眼下非常时髦的技术名词,随着大数据产业链的不断完善以及大数据本身价值在被不断地开发,数据方面的岗位不论在哪都有巨大的用人需求。根据澳洲最大的求职网站Seek统计,即使在疫情期间,Data Engineer仍然有4000+的职位虚位以待。作为一个高技术、高需求的新行业,数据工程师在澳洲的平均工资甚至达到了120k+。 ...

star

成为Job Ready的Data Engineer

JOB-READY PORTFOLIO

每期不同的商业团队项目向招聘企业展示

多位Data Engineer合作,从需求分析做起,一直到数据处理,数据架构搭建,机器建模和可视化。学习如何在AWS云上搭建数据库以及数据流程,用大数据工具处理和转换数据,分析数据和搭建模型,最后把项目产品化并创造价值。

商业数据工程全栈班第11期 项目展示:Ori-Arrow
商业数据工程全栈班第11期 项目展示:Ori-Arrow
数据工程全栈班13期团队项目Final Demo_Data Magic组
数据工程全栈班13期团队项目Final Demo_Data Magic组
CAREER SERVICES

通过我们帮你获得理想工作

有机会参加Career Coaching Bootcamp,2个月找工作陪伴,为面试做好准备,并与招聘人员建立联系。

100+
Hiring partners
85%
Employment rate
5,000+
Offers
什么是数据工程?带你了解数据工程师的职能

导师团队

Cici Ding
Data Business Analyst executive

Global IT Consultancy Company担任Senior Data Engineer,多年IT和Dat ...

Cici Ding
Gucheng Zhu
数据工程师

CBA银行数据工程师。早年留学澳洲,蹉跎中练出一身本领。资深数据工程师,10年本地工作经验,非常熟悉澳洲市场(Tier1 ...

Gucheng Zhu
Ray Ma
微软云工程师

微软云解决方案架构师,软件工程师,大学讲师,作者。 曾在AWS任软件开发领域云计算工程师。2010-2016微软最有价值 ...

Ray Ma
Chao Mu
Managing Consultant

目前就职于Altis Consulting,担任Managing Consultant。新南威尔士大学(UNSW)信息与 ...

Chao Mu
Leo
资深数据工程师

资深数据工程师。本科毕业于中山大学应用数学系,硕士毕业于墨尔本莫纳什大学商业信息系统系。本人从数据库开发做起,非常熟悉在 ...

Leo

价格选项

feature100+ 小时导师直播授课
feature丰富的视频课程辅助学习
feature3 个项目丰富简历
feature2 个月 Career Coaching
1
Price

$5500

2
Upfront Early Bird
5% off

$5200

$5500

分期支付 $ 1054 X 6 = $ 6324

*Taxes are applicable

首付$ 695 分期支付$ 521 X 12 = $ 6252

*Taxes are applicable

课程知识点

数据全栈

数据全栈

DBMS

DBMS

ER Model

ER Model

Snowflake

Snowflake

AWS

AWS

Data Engineering Pipeline

Data Engineering Pipeline

Data Wrangling

Data Wrangling

Python

Python

Jupyter

Jupyter

Pandas

Pandas

Power BI

Power BI

SQL

SQL

Agile

Agile

Prototype

Prototype

Linux

Linux

Machine Learning

Machine Learning

Statistical Modelling

Statistical Modelling

Exploratory Data Analysis

Exploratory Data Analysis

XGBoost

XGBoost

Data Visualisation

Data Visualisation

Spark

Spark

Hadoop

Hadoop

Git

Git

Datalake

Datalake

Kaggle

Kaggle

Scikit Learn

Scikit Learn

Databricks

Databricks

Data Warehouse

Data Warehouse

Tableau

Tableau

R

R

ETL

ETL

AWS-云大数据

AWS-云大数据

AWS EC2

AWS EC2

AWS S3

AWS S3

AWS RDS

AWS RDS

Redshift

Redshift

AWS Lambda

AWS Lambda

AWS VPC

AWS VPC

Cloudformation

Cloudformation

AWS Athena

AWS Athena

AWS Glue

AWS Glue

Step Functions

Step Functions

AWS Sagemaker

AWS Sagemaker

AWS SQS

AWS SQS

AWS SNS

AWS SNS

Serverless

Serverless

谁应该参加我们的数据工程全栈项目班?

starIT/CS 毕业生、在校生
starData Science 在校生、毕业生
starIS 专业毕业生
star想从事数据工程的数据分析师

数据工程全栈班将通过3个月的课程学习+项目实践带你学会利用 Python 分析数据,利用 AWS 云服务搭建数据工程项目,使用机器学习和数据建模来处理和分析海量数据。

什么是数据工程?

数据工程是指面向不同计算平台和应用环境,使用信息系统设计,开发和评价的工程化技术和方法,一般被广泛应用于数据的传输,转换和储存。像如何高效存储海量的数据,利用实时数据反馈用户状况,以及利用机器学习来实现精准推荐等都是数据工程所研究的方向。

什么是数据工程?

什么是数据工程师?

数据工程师在大数据时代或者被称为数据架构师更准确,工作的重点更偏向于数据架构,计算,数据存储,数据流,数据库设计等方向。因此数据工程师会对编程要求更高一点。

数据工程师的工作内容

数据工程师就像餐厅的主厨一样,为了给大家呈现精美的菜肴,首先需要进货,购买一些蔬菜和鸡鸭鱼肉,而这些原始食材就相当于source data一样。

当通过不同的方式得到原数据后,DE需要通过各种方式处理好这些数据,就类似厨师需要给鱼刮刮鳞,鸡要去毛,肉要腌制等;初步处理完毕后,还要把各种食材切成不同的形状,所有这些食物材料的处理,就相当于data transformation和data cleansing。

食材处理完毕后,需要烹饪成菜肴,比如说有些菜需要蒸,有些菜需要炸,那么厨师就会以相应的方式去烹饪这道菜,这就类似于数据工程中有时候需要处理好的数据以dashboard的形式去展现出,有时候需要用处理好的数据去训练ML的model。

有些时候,处理好的数据不需要立刻做成菜肴,那么厨师就会把这些食材放进冰箱,这就相当于数据工程中的data backup操作 - 把处理好的数据先backup到某个地方,之后有product需要这些处理好的数据时,再拿出来用。

从原食材到最终呈现给顾客的这整个过程,就相当于把源数据变为数据产品的整个过程。作为主厨,还需要通过不同的方式,去收集食客的反馈,才可以改进菜肴的味道,这相当于在数据工程中,收集用户的反馈,并根据反馈来改进各个环节的数据操作。

 

数据工程师 DE vs 数据分析师 DA vs 数据科学家 DS

数据分析师主要是负责收集处理数据以及对数据进行可视化展示,而数据工程师更多负责搭建数据结构,以及大量使用云技术与 DevOps 合作进行云端环境的搭建。数据科学家则对更注重于数据模型,机器学习以及数据挖掘等方面。

数据工程师DE vs DA和DS区别

为什么要学数据工程?

而且由于数据需要长期维护,所以数据工程师工作相对稳定,但是无论是在澳洲还是在中国都没有一个完善的培养机制,通过培训的数据工程师会相对更受青睐。

数据工程师香(特写)在何处?

什么是数据工程全栈项目班?

匠人学院的数据工程全栈项目班是全澳首创的大数据培训课程,已经帮助数百位学员拿到Offer,课程由一线大厂导师结合匠人独特的培训5.0模式(直播授课+真实团队项目)来培养出技术过硬,以及有丰富实战经验的数据工程师。并且学生在两年内可以免费重听,享受终身视频免费学习

在三个月内,一线大厂导师进行线上授课,为同学答疑解惑,让学生系统地掌握数据工程师的核心技术技能。除此之外,学生还会完成一个独立的个人项目及一个与 DevOps 合作的多角色团队大项目,将所学知识点应用于项目实战中去。

课程会主要分为基础知识学习,数据项目实战以及公司商业项目、简历内推三大阶段来提升学生个人能力,完美模拟真实工作内容及流程。

第一阶段:数据基础知识学习

一线大厂明星导师进行直播授课,系统进行数据工程核心技术的知识讲解,带领学生快速掌握企业级数据仓库搭建和构架,轻松应对公司面试和笔试。

第二阶段:商业级团队项目

有丰富实战经验的技术型人才在市场中更有竞争力。在课程内,学生会完成一个团队大项目,更加熟练掌握 AWS 云上数据库搭建流程,实现项目产品化的商业价值。

第三阶段:简历内推机会

匠人毕业学员的简历,有权优先录入简历内推库。依托匠人长久积累的的企业伙伴和毕业校友、导师的长久合作,这些简历会被优先推荐和匹配合适的岗位,有效缩短求职路径。

第四阶段:IT Career Coaching Bootcamp

2 个月的 Career Coaching,从职业规划,简历,面试,谈薪水等多方面提升。

独创了 Tutorial 的教学模式,不同主题小组互动辅导:

  • 辅导老师:Career Coaching Tutor
  • 时长:7 Weeks
  • 针对对象:专为寻求澳洲工作的学生和在职人士而设计,强调基础技能和本地市场适应。

IT Career Coaching Bootcamp 老师

为什么要学习数据工程全栈项目班?

由于目前大学并没有提供系统的培训,一般行业内的数据工程师都是由社会培训,并且企业更偏向于拥有丰富项目经验的数据工程师,就业门槛相对于数据分析师来说更高一些。而我们课程的导师都是来自各个行业,且经验丰富,通过他们的指导,可以快速获取 Offer 直通车的门票。

项目经验丰富,由团队精神的分析师是面试官的首选。匠人多角色团队项目的设计模式更贴合澳洲的真实职场环境,让学生提前熟悉数据工程师的日常工作流程,增加个人竞争力。这是自学没办法媲美的。而且随着匠人培训 5.0 模式的升级,训练营的内容得到越来越多的企业认可。目前已经与德勤,Servian 等公司建立合作关系,能给优秀学员争取更多的内推机会。

 

数据工程全栈项目班亮点

1.一线大厂明星导师精心打造,进行直播面对面授课

课程导师均来自澳洲一线大厂,具备多年数据岗位从业经验,传授当下招聘市场需要的技术知识以及真实有效的行业经验

2.串联数据工程知识点,有效进行系统学习

数据工程的核心是如何把不同的工具,和技能串联在一起,不同的接口如何链接,这就需要一个系统化更高维度的学习。课程中涵盖了目前市面上对数据工程师求职所需的所有技能点。除了日常的直播授课外,还会有不定期的 Tutorial 作为指导,帮助你加速理解知识点。课程中包括了如下的知识体系和内容:

数据库基础操作

帮助学生巩固基础知识,主要知识点包括数据库管理系统(DBMS), 数据库查询语言 SQL 以及关系型数据库等。

数据存储

了解大数据的两大存储方式:数据仓库(Data Warehouse)和数据湖(Data Lake)。了解数据探索的几种方法。

大数据

带你了解大数据常用数据结构,并结合谷歌云服务 GCP 学习云端处理大数据的基本操作和可用服务。

数据建模&机器学习

掌握回归、支持向量机 SVM、决策树等几种机器学习算法,了解真实工作中分析数据的流程,从需求分析、数据建模到获取结果。

Python 数据分析

学习使用 Python 进行数据分析,学习 Python 相关模块。

数据可视化

学习利用 Tableau 可视化数据结果,并通过十多个不同案例掌握数据可视化的具体操作。

AWS 部分

学习使用亚马逊云服务 AWS 的服务和功能,上手云端搭建数据工程,最实际、最有竞争力的行业必备技能

3.简历内推库 

让学员“不仅仅是获得实习,更成为工作 offer 收割机”

简历内推库是一个特设的、专为我们的学员打造的数字化简历存储平台。在这里,每位学员的简历都经过专业导师的审核与优化,确保其准确、专业且符合行业标准。

4.优秀同学内推机会

匠人受到许多企业的认可,我们会根据学生项目完成质量及项目 Tutor 对学生的评价,对项目中表现优秀的同学进行优先内推。

数据工程全栈班和别的课程对比

学员真实 Offer 展示

自数据工程全栈班开班以来,有超 200+ 同学进入澳洲各大公司如 afterpay,Mecca 和 Thoughtworks 等工作。

课程适合人群

本课程专为 IT/CS/DS/IS 专业的毕业生和在校生设计,帮助学员跃升为掌握职场技能的数据工程师和数据科学家。

你需要掌握:

课程不适合

  • 完全不了解 Python 的基础知识
  • 没有 SQL 基础知识

学员权益大盘点,属于匠人学员的专属礼遇

概念界定

  • 匠人学员:凡报名过匠人数据工程全栈项目班的学员
  • 新学员:报名数据工程全栈项目班后,第一次参与课程期间,统称为新学员
  • 老学员:报名数据工程全栈项目班后,第一次参与的课程结课后,统称为老学员(这里主要指 enroll 课程期间内)

⚠️以下权益仅限购买课程本人使用,禁止售卖和转让,一经发现封号处理

logo

Follow Us

linkedinfacebooktwitterinstagramweiboyoutubebilibilitiktokxigua

We Accept

/image/layout/pay-paypal.png/image/layout/pay-visa.png/image/layout/pay-master-card.png/image/layout/pay-stripe.png/image/layout/pay-alipay.png

地址

Level 10b, 144 Edward Street, Brisbane CBD(Headquarter)
Level 8, 11 York st, Wynyard, Sydney CBD
Business Hub, 155 Waymouth St, Adelaide SA 5000

Disclaimer

footer-disclaimerfooter-disclaimer

JR Academy acknowledges Traditional Owners of Country throughout Australia and recognises the continuing connection to lands, waters and communities. We pay our respect to Aboriginal and Torres Strait Islander cultures; and to Elders past and present. Aboriginal and Torres Strait Islander peoples should be aware that this website may contain images or names of people who have since passed away.

匠人学院网站上的所有内容,包括课程材料、徽标和匠人学院网站上提供的信息,均受澳大利亚政府知识产权法的保护。严禁未经授权使用、销售、分发、复制或修改。违规行为可能会导致法律诉讼。通过访问我们的网站,您同意尊重我们的知识产权。 JR Academy Pty Ltd 保留所有权利,包括专利、商标和版权。任何侵权行为都将受到法律追究。查看用户协议

© 2017-2024 JR Academy Pty Ltd. All rights reserved.

ABN 26621887572