数据科学项目全栈班

CLASS1 Python基础

1.python常⽤用数据结构

2.⽹网络IO操作

3.异步/多进程开发

4.matplotlib 数据可视化

CLASS2 数据库基础

1. SQL基础

2. Sqlite / Mysql使用⼊⻔

CLASS3 数据抓取以及实践

1.数据源准备

1.1爬虫入门

1.2BeautifulSoup ⽹网⻚页数据解析

CLASS4 量化分析

1. 量化回测

1.1量化回测基本概念

1.2 BT回测框架简介

1.3再平衡策略介绍

2.策略实现

2.1 交易所API对接

2.2 数据签名

2.3 下单操作

CLASS5 数据可视化进阶

1.Python

1.1 Matplotlib 介绍

1.2 应用例子 入门 - 进阶- 高级作图

2.R

2.1 R 的数据可视化介绍

2.2 ggplot 介绍 (API，范例)

3.时序数据的可视化 （python例子， R例子）

4Bitcoin 数据可视化范例 （练习）

CLASS6 ⽤Python进⾏行行数据处理

Python Pandas 介绍

Dataframe介绍

数据选择

数据操作

时序数据处理与分析

CLASS7 用R进⾏行行数据处理

R数据转化操作介绍

基本数据分析操作

时序数据分析操作(范例)

bitcoin的数据处理（练习）

CLASS8 时序数据预测模型(1)

Python sklearn介绍

Tensorflow

Tidyverse

回归分析

线性回归

SVM

Random Forest

CLASS9 时序数据预测模型(2)

回归分析（续）

MLP

RNN

LSTM

GRU

ARIMA

时序数据预测完整范例(Arima, Random Forest and LSTM)

CLASS10 Spark介绍与软件安装和开发环境搭建

Spark介绍之核心概念讲解

Spark介绍之生态系统介绍

Spark介绍之计算引擎剖析

Spark介绍之安装与配置

Spark介绍之IntelliJ IDEA安装与配置

Spark介绍之Jupiter Notebook安装与配置

CLASS11 使用DataFrame做数据处理和分析

SparkSQL和DataFrame 核心概念讲解

初始化SparkSession和创建DataFrame

查询DataFrame和可视化数据

增加、更新、移除列

分组、聚合、排序数据

使用Broadcast Variables and Accumulators

使用Join

将DataFrame保存为文件

生成临时表并用SQL进行查询和转化

CLASS12 Spark SQL程序设计和实战

Deliver澳洲著名互联网公司 homework之基础版本实现功能

Deliver澳洲著名互联网公司 homework之实现Error Handling + Unit Tests + Code Polishing

CLASS13 使用Structured Streaming处理流式数据

Spark Streaming和Streaming APP设计介绍

Structured Streaming 核心概念讲解

多重模式和设置读取Streaming Data

选择、分组、聚合、投影Streaming Data

理解和使用Window

使用Join

CLASS14 Kafka介绍

Kafka核心概念讲解

Kafka 安装和配置

Kafka实战演示

CLASS15 Spark Streaming程序设计和实战

Tweeter舆情分析

Twitter Keys and Access Tokens设置

Tweeter Kafka Producer设置

Kafka和Spark程序整合

Tweeter舆情分析程序实现

CLASS16 使用Spark MLLib进行机器学习

Spark MLLib简介

Spark Machine Learning Pipeline讲解

Spark MLLib算法库使用和实例讲解

分类算法：Decision Trees，Random Forests

回归算法：Lasso and Ridge Regression

聚类算法：K-means

协同过滤：ALS

CLASS17 时空数据分析 —— 时空数据可 视化: 项目2介绍 停车罚款问题 论文展示

时空数据可视化

空间数据可视化工具 tableau CARTODB R python

时间数据可视化回顾

练习： 墨尔本停车场数据可视化（时空）

CLASS18 时空数据分析 —— 时空数据 处理理操作

CLASS19 时空数据聚类和 预测(1)

CLASS20 时空数据聚类和 预测(2)

CLASS21 停⻋车场罚款问题 解决⽅方案 —— 优化算法（1）

CLASS22 停⻋车场罚款问题 解决⽅方案 —— 优化算法（2）

CLASS23 数据科学数学基 础知识补缺 (1)

CLASS24 数据科学数学基 础知识补缺 (2)

CLASS25 Kaggle介绍

CLASS26 完整Kaggle流程

CLASS27 kaggle竞赛指导(1)

CLASS28 kaggle竞赛指导(2)

CLASS29 kaggle竞赛指导(3)