Skip to content

爬虫获取数据, 分析与挖掘建模。从零开始填坑,任重道远!Only create, you can know!

Notifications You must be signed in to change notification settings

RockLei/Data-analysis

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

34 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Data-analysis

python数据分析与挖掘建模

ch01: 数据分析与特征处理
ch02: 机器学习与数据建模
ch03: 模型评估
 
ch_Bilibili: scrapy爬取B站视频并分析
ch_Haiwang:  scrapy爬取猫眼《海王》, ip代理池的维护,词云的可视化。
ch_Distributedcrawler: scrapy-redis分布式爬虫

kaggle: kaggle竞赛项目

常用工具

  • numpy

  • pandas

  • matplotlib

    • seaborn 基于matplotlib,对图像的丰富
  • Scipy 科学计算中包的集合

    • scipy.integrade 数值积分例程和微分方程求解器
    • scipy.linalg 线性代数例程和矩阵分解
    • scipy.optimize 函数优化器和根查找算法
    • scipy.signal 信号处理工具
    • scipy.sparse 稀疏矩阵和稀疏线性系统求解器
    • scipy.special SPECFUN(实现了许多常用数学函数)
    • scipy.stats 标准连续和离散概率分布
    • scipy.weave 利用内脸c++代码加速数组计算的工具
  • sk-learn 数据挖掘机器学习算法的集合

About

爬虫获取数据, 分析与挖掘建模。从零开始填坑,任重道远!Only create, you can know!

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • Jupyter Notebook 96.1%
  • Python 3.9%