商业数据分析实战班

Introduction and SQL components (1)

1. Introduction

- Data structures (Structured data, semi-structured data, unstructured data)

- RDBS and RDBMS concepts

(Relational databases and Relational database management system)

- Data analysis flow and example

- Data analyst job requirements

2. SQL components (1)

- SQL DDL (data manipulation language) - CREATE, DROP, TRUNCATE, ALTER, COMMENT, RENAME

- DB tools - DBeaver introduction and installation

Assignment:

1. Install DBeaver

2. sql_components_tutorial Q1 and Q2

3. Register an AWS account (if you don't have one)

AWS RDS and SQL components (2)

1. Amazon Web Services - RDS (Relational database service) Introduction

2. SQL components (2)

- DML (data manipulation language)

- DCL (data control language)

- TCL (transaction control language)

SQL operators and common used functions

SQL common data types, operators and functions:

Common data types:

- Text / Varchar

- Integer

- Date / Timestamp

- Serial

Operators:

- Arithmetic operators

- Comparison operators

- Logical operators

SQL aggregation functions:

- Sum

- Count

- Avg

SQL common functions:

- Min / Max

- Distinct

- Substring

- Length

- Upper / Lower

- Coalesce

- Extract

- Concat

- Case statement

- Cast / to_date

SQL joins and window functions

SQL joins and window functions

Joins:

- No join

- Inner join

- Left join

- Right join

- Full join

- *Cross join

- *union

Window Functions:

- Row_number / Rank / Dense_rank

- Lead / Lag

- First_value / Last_value

SQL query optimization and performance tunning

Python 基本语法 - Data Structure

· Python 基本介绍和常用IDE各自的特点（学员已经在Tutor协助下完成安装的前提下）

· 基本编程概念 -Object, Class, Method, Attribute

· Python 最重要的三种数据结构（List, Tuple, Dictionary) 各自的基本特征和应用场景

· 数据类型之间的互相转换， (Int, String, Character, Float) 常用method进行数据处理

· Datetime 工具包 操作时间日期数据， 模拟批处理不统一格式下的日期时间数据

Python 基本语法- Control Flow

Python Control Flow:

条件语句 (if else elif; case)

基本循环 (for , while, range vs. xrange )

Error Handling (tyr except pass)

List Comprehension

函数与类的关系 (function, class & object)

基本函数的参数传导，继承 以及装饰器（decorator)

Lambda 匿名函数

多层循环 （利用 break/continue 优化多层嵌套循环）

Exercise:

6 different in class exercises to master python control flow

Pandas Dataframe Part 1

Use Pandas for data wrangling:

1. From Numpy to Pandas

2. Series, TimeSeries & Dataframe

3. Structural understanding of DataFrame object and its methods & attributes

4. Data exploration use DataFrame

5. Read/Write use DataFrame

6. Advanced DataFrame filtering & sorting

7. 3 different methods to Loop through Dataframe

8. Map & Apply with self defined function & annoymous function

Pandas DataFrame Part 2

Data Wrangling use Pandas part 2

1. Convert numerical data to categorical data use bin function

2. Merge & Concat equvalent of join & union in SQL (performance comparison and bottle neck for process data in SQL or Pandas)

3. Groupby and Pivot in Pandas

4. Advanced usage of Groupby with agg,apply & map

Exercise:

1 in class exercise and 5 take home exercises

Advanced Excel & VBA 实际操作5-Excel & PowerBI Integration

· EXCEL Connect to Outlook to complete the full circle from report building to report distribution in one button click

· EXCEL Connect to PPT to build a fully automated PPT presentation

· EXCEL read data from other sources

· CSV files, SQL Server and SAP GUI8

Advanced Excel &VBA 实际操作3

· 如何快速重构接近崩溃的Legacy EXCEL 模型 （优化设计缺陷的历史遗留模型，一小时完成一天的工作量，让老板刮目相看

VBA 基础知识

· Variables, Constant and data type

· Excel Object hierarchy

· Loop & if statement : Nested loop (using exit and goto statement)

· String handling & datetime handling

· Arrays

· Error handling

· Forms & controls

Data Type Introduction数据类型介绍

String字符串

Numric 数字符类

Datetime时间、日期类

Advanced Excel & VBA 实际操作4-Excel数据可视化套餐

· EXCEL 数据可视化套餐 （Power Pivot, Power Query, Power Map)

Basic Kimball Dimensional Modelling Introduction 维度建模介绍

· What is data modelling? 什么是数据建模？

· Conceptual, logical and physical schemas 概念的、逻辑的和物理的模式

· Data Modelling Components 数据建模有哪些元素呢？

· Entity Relationship 实体间的关系介绍（ie.一对一、一对多、多对一）

· Star Schema 星型模型

· SCD TYPE 1,2,3 缓慢变化维度的三种类型

· Fact&Summary Table事实表与总结表分别都是什么

面向面试学SQL + Tableau 课程介绍

· what is data analysis? 什么是数据分析？数据分析可以做什么？

· Data to Decision (D2D) 从数据到决策，清理复杂庞大的数据，有力支持商业决定

· Text Based Primary Information Types 了解基于文本的主要信息类型

· Big Data Ecosystem 大数据生态系统架构

· Data Visualization 数据可视化介绍，从图表读懂数据想告诉你的故事

· Major Business Intelligence Platform Comparison 主要商业智能平台的对比

· Why SQL 为什么要学SQL？ 它对于数据分析有什么强劲表现？

· SQL platforms SQL平台类介绍

SQL Basic SQL基础知识

· DDL, DML, DCL, TCL 数据定义、数据处理、数据控制、交易管理语言

· SQL Usage and Samples 相关使用与样例

Tableau

· Tableau for visualization

· Tableau dashboard building

· Interview preparation

实操技巧 vs 面试技巧

对以往七节课学习的内容进行深入浅出的系统复习，从开头到结尾毫无遗漏地梳理知识点，温故而知新。除此，贴心搭配职业道路规划咨询服务，服务你在学习、提升技能以外的终极需求。技能培训、职业规划、建立提升、内部推荐等一站式畅快体验，护航你的人生梦想。 数据分析类简历修改，如何应对数据分析技术面试，presentation技巧训练

Machine Learning 机器学习-踏入AI第一步

挖掘数据背后的关系，用监督式学习和非监督式学习找出数据集之间的奥秘。重点攻克文科背景学生理解机器学习的常见问题，做一个理解背后原理，面试应答如流的“调包侠”。

· Machine learning basic

· Supervised and unsupervised learning

· Clustering

· rRegression

SQL joins Introduction

· Records Content 数据记录内容

· Inner Join 数据内连接

· Left join inclusive&exclusive 左连接的包含与不包含关系

· Right join inclusive&exclusive 右连接的包含与不包含关系

· Full join inclusive&exclusive 全连接的包含与不包含关系

· Cross Join 笛卡尔乘积的介绍

使用ANACONDA 安装&管理Python 环境，IDE 选择 以及 Python 版本管理

1.1 使用ANACONDA 安装&管理Python 环境，IDE 选择 以及 Python 版本管理（1.5 小时）

实操技巧 vs 面试技巧

对以往七节课学习的内容进行深入浅出的系统复习，从开头到结尾毫无遗漏地梳理知识点，温故而知新。除此，贴心搭配职业道路规划咨询服务，服务你在学习、提升技能以外的终极需求。技能培训、职业规划、建立提升、内部推荐等一站式畅快体验，护航你的人生梦想。 数据分析类简历修改，如何应对数据分析技术面试，presentation技巧训练

Python基本语法和对象

· 数据类型（e.g.int,f loat, string, datetime）

· Container类型和基本操作（e.g.List,Dictionary,Tuple）

· 循环，条件语句语句，例如：何调包与简单Python项⽬的结构

如何使用Python 读写 EXCEL, CSV 以及数据库（SQL）

· 学习如何使⽤Python直接读写CSV或使⽤Pandas包读写CSV

· 使⽤xlwing操控EXCEL⽂件

· 学习使⽤pyodbc包连接数据库（穿插基本SQL语句教学）

Pandas 数据分析

· Time Series (时间格式与间隔的转换； 各种时间序列预测技巧)

· 表格格式 -Data Frame 的基本操作 (read,write,slice,sort等)

· 表格格式 -Data Frame 的复杂操作 （groupby pivot, map,apply, ,merge,concat 等）

· 格式间的转换，文本模糊搜索匹配技巧（Fuzzy Match）

· 超大文件读写操作技巧

Python数据可视化（Matplotlib, Seaborn）

· 传统图表绘制

· 三维图表绘制

· 动态可视化

数据分析师实用Python库

· Pyodbc - 连接读写主流数据库

· BlockingScheduler - 程序定时器 :

· W32COM - 操作OUTLOOK邮件任务及其他Office软件

· Multiprocessing - 多进程操作

VBA 基础知识

· Variables, Constant and data type

· Excel Object hierarchy

· Loop & if statement : Nested loop (using exit and goto statement)

· String handling & datetime handling

· Arrays

· Error handling

· Forms & controls

Advanced Excel & VBA 课程概述

Advanced Excel & VBA 课程概述

Advanced Excel &VBA 实际操作3

· 如何快速重构接近崩溃的Legacy EXCEL 模型 （优化设计缺陷的历史遗留模型，一小时完成一天的工作量，让老板刮目相看

Advanced Excel& VBA 实际操作2

· 如何结合EXCEL 高级函数与VBA 编程共同完成大型EXCEL报表模型

· EXCEL 规范化建模， 变量命名，变量管理

· 巧用复杂函数与Pivot Table

Advanced Excel & VBA 实际操作4-Excel数据可视化套餐

· EXCEL 数据可视化套餐 （Power Pivot, Power Query, Power Map)

Advanced Excel & VBA 实际操作1

· 如何使用VBA边写自定义函数和可复用小工具

Advanced Excel & VBA 实际操作5-Excel & PowerBI Integration

· EXCEL Connect to Outlook to complete the full circle from report building to report distribution in one button click

· EXCEL Connect to PPT to build a fully automated PPT presentation

· EXCEL read data from other sources

· CSV files, SQL Server and SAP GUI8

SQL Basic SQL基础知识

· DDL, DML, DCL, TCL 数据定义、数据处理、数据控制、交易管理语言

· SQL Usage and Samples 相关使用与样例

面向面试学SQL + Tableau 课程介绍

· what is data analysis? 什么是数据分析？数据分析可以做什么？

· Data to Decision (D2D) 从数据到决策，清理复杂庞大的数据，有力支持商业决定

· Text Based Primary Information Types 了解基于文本的主要信息类型

· Big Data Ecosystem 大数据生态系统架构

· Data Visualization 数据可视化介绍，从图表读懂数据想告诉你的故事

· Major Business Intelligence Platform Comparison 主要商业智能平台的对比

· Why SQL 为什么要学SQL？ 它对于数据分析有什么强劲表现？

· SQL platforms SQL平台类介绍

Basic Kimball Dimensional Modelling Introduction 维度建模介绍

· What is data modelling? 什么是数据建模？

· Conceptual, logical and physical schemas 概念的、逻辑的和物理的模式

· Data Modelling Components 数据建模有哪些元素呢？

· Entity Relationship 实体间的关系介绍（ie.一对一、一对多、多对一）

· Star Schema 星型模型

· SCD TYPE 1,2,3 缓慢变化维度的三种类型

· Fact&Summary Table事实表与总结表分别都是什么

Data Type Introduction数据类型介绍

String字符串

Numric 数字符类

Datetime时间、日期类

Machine Learning 机器学习-踏入AI第一步

挖掘数据背后的关系，用监督式学习和非监督式学习找出数据集之间的奥秘。重点攻克文科背景学生理解机器学习的常见问题，做一个理解背后原理，面试应答如流的“调包侠”。

· Machine learning basic

· Supervised and unsupervised learning

· Clustering

· rRegression

SQL joins Introduction

· Records Content 数据记录内容

· Inner Join 数据内连接

· Left join inclusive&exclusive 左连接的包含与不包含关系

· Right join inclusive&exclusive 右连接的包含与不包含关系

· Full join inclusive&exclusive 全连接的包含与不包含关系

· Cross Join 笛卡尔乘积的介绍

Tableau

· Tableau for visualization

· Tableau dashboard building

· Interview preparation