设为首页收藏本站

自学IT吧论坛

 找回密码
 立即注册
搜索
查看: 3562|回复: 97

数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营

  [复制链接]
  • TA的每日心情

    3 天前
  • 签到天数: 1384 天

    [LV.10]以坛为家III

    1177

    主题

    2668

    帖子

    5556

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    5556
    发表于 2017-10-2 17:14:09 | 显示全部楼层 |阅读模式

    1. 基础编程知识夯实


    3 b; Q) W9 A% \  g: r8 ^4 Y0 a: I
    • 将学习到Python基础知识、常用库与工程技巧

    • 配合课程讲解与云平台练习及小组讨论,你将掌握python编程技能,数据类型与各种数据结构使用,完成具体任务的函数编写,常用的工程技巧

    • 试验编号SXY001-Python场景练习200题;


      ! V+ o& T/ \& z" R, m

    2. 数据获取与存储技能实训

    + f# I3 _# e" Z4 l5 v
    • 将学习到爬虫相关知识,对网页信息抓取,清洗,解析与存储

    • 配合课程讲解与云平台练习及小组讨论,你将掌握对工作所需或感兴趣的数据(网页文本、图片等)抓取与解析和数据库存储相关技能。掌握scrapy库对知乎和微博、豆瓣等的数据获取和存储案例。

    • 试验编号SXY002-网页爬虫数据,知乎、微博与新闻网站数据抓取与存储(有更好玩的随时补充)

      8 P1 j' n" d) S+ V6 s

    3. 数据分析技能实训


    , A; z. }, [9 F8 k5 m& C5 C1 _
    • 将学习到数据上的统计计算与分析方法

    • 配合课程讲解与云平台练习及小组讨论,你将掌握对已有数据统计分析和基本决策辅助的能力。熟练查询和使用pandas对txt、csv、office xls等不同类型的数据,读写与多种复杂计算、操作。

    • 试验编号SXY003-数据分析实验,多种格式文件的读写与操作,pandas无障碍操作练习,影评数据统计分析,人口信息分析,美国大选数据分析,区域医疗数据分析


      5 @! B/ F0 E7 Y- i# y


    ( B" r  L$ T2 Z7 q2 W

    4. 可视化技能实训


    $ U0 j9 d" Q% H
    • 将学习到几种可视化库与工具对全局数据和结果做可视化,动态展示结果

    • 配合课程讲解与云平台练习及小组讨论,你将掌握使用matplotlib和seaborn等对数据进行同步分析和可视化展示的能力。

    • SXY004-数据可视化实验,基本的分布与曲线拟合绘图、交通数据可视化、美国大选数据分析可视化等 。


      ) Y1 l$ _9 K3 h0 A" F5 V' Q$ J
    $ h  f2 x- O7 R+ T' |

    5. 大数据技能实训

    1 O; q% F9 A; N( N% n9 C
    • 将学习到hadoop相关知识,基本Map-reduce原理与spark知识

    • 配合课程讲解与云平台练习及小组讨论,你将掌握hadoop部分组件使用方法,手写map-reduce解决大数据处理的方法,及spark完成统计和简单建模的能力。

    • SXY005-大数据技能实验,手写map-reduce完成大数据的统计,海量文本数据处理,spark大数据处理示例、spark mllib分布式机器学习简单建模训练


      4 C; S7 }* H3 r; K1 Q& G2 R. i

    0 v8 t5 `0 r. t5 A+ @8 {- Z

    6. 机器学习应用实训


      i  W9 V8 O6 T2 T- P, `% J2 C7 q: p: p
    • 将学习到针对已有数据进行特征抽取与建模,使用机器学习辅助问题决策的知识

    • 配合课程讲解与云平台练习及小组讨论,你将掌握在已有数据的基础上,如何结合问题场景,进行有效的数据处理与特征抽取,并在此基础上使用多种建模库工具(scikit-learn、xgboost、lightGBM,liblinear,libsvm等)进行机器学习建模与应用的能力。

    • SXY006-机器学习实验,Kaggle泰坦尼克号之灾、自行车租赁、房价预测、电商销量预测、新闻主题分类、文本褒贬分析等案例


      9 L) R) Q4 q# T
    ) @+ y& E8 B7 [, v+ n) [& O5 ^
    3 V" O! c/ `  Y+ g" V1 o  ?4 O

    + a/ u  c" e* m

    7. 综合应用实训

    / I$ n1 N: b% x7 ?: [* Y5 O1 w) f
    • 将完成从数据获取解析、分析可视化到机器学习建模应用的完整案例

    • 配合课程讲解与云平台练习及小组讨论,你将掌握数据科学完整的流程,并能独当一面完成在公开数据(微博、知乎等)上的应用项目。

    • 结业项目,包括数据采集、清洗、存储、分析、可视化和建模等流程的标准化项目。


      2 ]; h4 a: U* Q& d3 O

    整个流程如下图所示:

      W* y/ _% H' s, c: ]7 q' n- V
    5 N3 u1 {" f9 [3 ]5 ]$ S: M

    整个过程学习很烧脑,同时也要严格把控自我时间跟上魔鬼的步伐,一步两步三步,找准自我的节奏~

    ; G& w9 r/ y; C


    ; n* X; o. P. }, I+ N3 f* {

    链接:

    游客,如果您要查看本帖隐藏内容请回复

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有帐号?立即注册

    x
  • TA的每日心情
    奋斗
    2020-11-24 15:22
  • 签到天数: 103 天

    [LV.6]常住居民II

    0

    主题

    562

    帖子

    1182

    积分

    永久VIP会员

    积分
    1182
    发表于 2017-10-2 17:50:07 | 显示全部楼层
    数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营
  • TA的每日心情

    2019-3-1 19:56
  • 签到天数: 63 天

    [LV.6]常住居民II

    0

    主题

    195

    帖子

    552

    积分

    Lv3中级程序猿

    Rank: 3Rank: 3

    积分
    552
    发表于 2017-10-2 18:44:59 | 显示全部楼层
    看看什么东西
  • TA的每日心情
    擦汗
    2020-12-4 14:34
  • 签到天数: 838 天

    [LV.10]以坛为家III

    0

    主题

    1031

    帖子

    3013

    积分

    永久VIP会员

    积分
    3013
    发表于 2017-10-2 19:12:09 | 显示全部楼层
    数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营
  • TA的每日心情
    开心
    2021-2-28 23:27
  • 签到天数: 155 天

    [LV.7]常住居民III

    0

    主题

    269

    帖子

    857

    积分

    永久VIP会员

    积分
    857
    发表于 2017-10-2 19:25:07 | 显示全部楼层
    不错的课程
  • TA的每日心情

    2020-12-9 22:34
  • 签到天数: 584 天

    [LV.9]以坛为家II

    4

    主题

    1172

    帖子

    3248

    积分

    永久VIP会员

    积分
    3248
    发表于 2017-10-2 19:44:20 | 显示全部楼层
    thanks
  • TA的每日心情
    开心
    2020-10-15 08:26
  • 签到天数: 343 天

    [LV.8]以坛为家I

    0

    主题

    720

    帖子

    2078

    积分

    永久VIP会员

    积分
    2078
    发表于 2017-10-2 20:22:18 | 显示全部楼层
    666
  • TA的每日心情
    开心
    2018-4-6 10:54
  • 签到天数: 113 天

    [LV.6]常住居民II

    0

    主题

    206

    帖子

    597

    积分

    Lv3中级程序猿

    Rank: 3Rank: 3

    积分
    597
    发表于 2017-10-2 20:24:10 | 显示全部楼层
    数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营
  • TA的每日心情
    开心
    2020-9-6 19:40
  • 签到天数: 103 天

    [LV.6]常住居民II

    1

    主题

    393

    帖子

    1015

    积分

    永久VIP会员

    积分
    1015
    发表于 2017-10-2 22:45:02 | 显示全部楼层
    感谢分享
  • TA的每日心情

    7 天前
  • 签到天数: 837 天

    [LV.10]以坛为家III

    1

    主题

    1378

    帖子

    3739

    积分

    永久VIP会员

    积分
    3739
    发表于 2017-10-2 22:56:28 | 显示全部楼层
    RE: 数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营 [修改]
    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    来自学IT吧,高薪等你拿! 立即登录 立即注册
    在线咨询
    在线咨询
    zxit_8@qq.com

    QQ|Archiver|小黑屋|自学IT吧    

    GMT+8, 2021-4-19 09:31 , Processed in 0.101785 second(s), 31 queries , Gzip On.

    © 2014-2017 自学IT吧论坛

    快速回复 返回顶部 返回列表