设为首页收藏本站

自学IT吧论坛

 找回密码
 立即注册
搜索
查看: 5289|回复: 10

数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营

  [复制链接]
  • TA的每日心情

    7 天前
  • 签到天数: 1452 天

    [LV.10]以坛为家III

    1241

    主题

    2800

    帖子

    5984

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    5984
    发表于 2017-10-2 17:14:09 | 显示全部楼层 |阅读模式

    1. 基础编程知识夯实


    0 A1 f# k( \: T7 I( f& j
    • 将学习到Python基础知识、常用库与工程技巧

    • 配合课程讲解与云平台练习及小组讨论,你将掌握python编程技能,数据类型与各种数据结构使用,完成具体任务的函数编写,常用的工程技巧

    • 试验编号SXY001-Python场景练习200题;

      . R4 ^" ?9 {# X5 O, L' N/ a6 }

    2. 数据获取与存储技能实训


    * U( R: b1 k3 f4 s' p* d4 v
    • 将学习到爬虫相关知识,对网页信息抓取,清洗,解析与存储

    • 配合课程讲解与云平台练习及小组讨论,你将掌握对工作所需或感兴趣的数据(网页文本、图片等)抓取与解析和数据库存储相关技能。掌握scrapy库对知乎和微博、豆瓣等的数据获取和存储案例。

    • 试验编号SXY002-网页爬虫数据,知乎、微博与新闻网站数据抓取与存储(有更好玩的随时补充)

      8 J. c4 D, ]1 J0 j2 }  Q

    3. 数据分析技能实训


    + k* ^0 n' q. |7 {# J  Y% {
    • 将学习到数据上的统计计算与分析方法

    • 配合课程讲解与云平台练习及小组讨论,你将掌握对已有数据统计分析和基本决策辅助的能力。熟练查询和使用pandas对txt、csv、office xls等不同类型的数据,读写与多种复杂计算、操作。

    • 试验编号SXY003-数据分析实验,多种格式文件的读写与操作,pandas无障碍操作练习,影评数据统计分析,人口信息分析,美国大选数据分析,区域医疗数据分析


      9 i$ C) r& K% u7 o9 t


    * ^: [: q2 I2 h6 e& W0 @

    4. 可视化技能实训


    4 W" N7 m4 Y" I# q, I. j
    • 将学习到几种可视化库与工具对全局数据和结果做可视化,动态展示结果

    • 配合课程讲解与云平台练习及小组讨论,你将掌握使用matplotlib和seaborn等对数据进行同步分析和可视化展示的能力。

    • SXY004-数据可视化实验,基本的分布与曲线拟合绘图、交通数据可视化、美国大选数据分析可视化等 。


      - ^% F5 G8 G5 x

    5 W5 Q- a. @6 {% L3 {! i; O

    5. 大数据技能实训

    8 {! [1 |8 b$ u; ?; y5 {
    • 将学习到hadoop相关知识,基本Map-reduce原理与spark知识

    • 配合课程讲解与云平台练习及小组讨论,你将掌握hadoop部分组件使用方法,手写map-reduce解决大数据处理的方法,及spark完成统计和简单建模的能力。

    • SXY005-大数据技能实验,手写map-reduce完成大数据的统计,海量文本数据处理,spark大数据处理示例、spark mllib分布式机器学习简单建模训练

      ( V" d/ y$ Q- {0 X

    ) g4 t  Q6 y6 H5 z5 c& e5 }1 o

    6. 机器学习应用实训


    . A! f; E. e' _. c3 H) ?4 k
    • 将学习到针对已有数据进行特征抽取与建模,使用机器学习辅助问题决策的知识

    • 配合课程讲解与云平台练习及小组讨论,你将掌握在已有数据的基础上,如何结合问题场景,进行有效的数据处理与特征抽取,并在此基础上使用多种建模库工具(scikit-learn、xgboost、lightGBM,liblinear,libsvm等)进行机器学习建模与应用的能力。

    • SXY006-机器学习实验,Kaggle泰坦尼克号之灾、自行车租赁、房价预测、电商销量预测、新闻主题分类、文本褒贬分析等案例

      " T8 |% l) z" P$ p9 J; n3 U- |. _; i
    ' k6 n1 D" o4 f' C
    6 G( p+ Q* [- F( O& I
    6 R4 ?2 c& {5 i3 B1 F9 m

    7. 综合应用实训


    7 {1 i. S% V/ M) F
    • 将完成从数据获取解析、分析可视化到机器学习建模应用的完整案例

    • 配合课程讲解与云平台练习及小组讨论,你将掌握数据科学完整的流程,并能独当一面完成在公开数据(微博、知乎等)上的应用项目。

    • 结业项目,包括数据采集、清洗、存储、分析、可视化和建模等流程的标准化项目。


      3 z: v5 x9 G7 c9 |, w

    整个流程如下图所示:

    6 c  z& m1 d8 A( @; n
    7 W* ]& z5 U: P

    整个过程学习很烧脑,同时也要严格把控自我时间跟上魔鬼的步伐,一步两步三步,找准自我的节奏~


    2 k# q# f, B5 Q! V3 m" K4 N


    ; A1 g7 p5 j* k& ~$ m0 U, u

    链接:

    游客,如果您要查看本帖隐藏内容请回复

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有帐号?立即注册

    x
  • TA的每日心情
    奋斗
    2020-11-24 15:22
  • 签到天数: 103 天

    [LV.6]常住居民II

    0

    主题

    572

    帖子

    1202

    积分

    永久VIP会员

    积分
    1202
    发表于 2017-10-2 17:50:07 | 显示全部楼层
    数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营
  • TA的每日心情

    2019-3-1 19:56
  • 签到天数: 63 天

    [LV.6]常住居民II

    0

    主题

    199

    帖子

    560

    积分

    Lv3中级程序猿

    Rank: 3Rank: 3

    积分
    560
    发表于 2017-10-2 18:44:59 | 显示全部楼层
    看看什么东西
  • TA的每日心情
    擦汗
    2020-12-4 14:34
  • 签到天数: 838 天

    [LV.10]以坛为家III

    0

    主题

    1038

    帖子

    3027

    积分

    永久VIP会员

    积分
    3027
    发表于 2017-10-2 19:12:09 | 显示全部楼层
    数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营
  • TA的每日心情
    开心
    2021-2-28 23:27
  • 签到天数: 155 天

    [LV.7]常住居民III

    0

    主题

    269

    帖子

    857

    积分

    永久VIP会员

    积分
    857
    发表于 2017-10-2 19:25:07 | 显示全部楼层
    不错的课程
  • TA的每日心情

    2020-12-9 22:34
  • 签到天数: 584 天

    [LV.9]以坛为家II

    4

    主题

    1211

    帖子

    3326

    积分

    永久VIP会员

    积分
    3326
    发表于 2017-10-2 19:44:20 | 显示全部楼层
    thanks
  • TA的每日心情
    开心
    2020-10-15 08:26
  • 签到天数: 343 天

    [LV.8]以坛为家I

    0

    主题

    750

    帖子

    2138

    积分

    永久VIP会员

    积分
    2138
    发表于 2017-10-2 20:22:18 | 显示全部楼层
    666
  • TA的每日心情
    开心
    2018-4-6 10:54
  • 签到天数: 113 天

    [LV.6]常住居民II

    0

    主题

    207

    帖子

    599

    积分

    Lv3中级程序猿

    Rank: 3Rank: 3

    积分
    599
    发表于 2017-10-2 20:24:10 | 显示全部楼层
    数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营
  • TA的每日心情
    开心
    2021-9-11 17:59
  • 签到天数: 108 天

    [LV.6]常住居民II

    1

    主题

    403

    帖子

    1040

    积分

    永久VIP会员

    积分
    1040
    发表于 2017-10-2 22:45:02 | 显示全部楼层
    感谢分享
  • TA的每日心情

    2021-7-16 21:36
  • 签到天数: 841 天

    [LV.10]以坛为家III

    1

    主题

    1409

    帖子

    3816

    积分

    永久VIP会员

    积分
    3816
    发表于 2017-10-2 22:56:28 | 显示全部楼层
    RE: 数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营 [修改]
    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    来自学IT吧,高薪等你拿! 立即登录 立即注册
    在线咨询
    在线咨询
    zxit_8@qq.com

    QQ|Archiver|小黑屋|自学IT吧    

    GMT+8, 2021-10-22 03:02 , Processed in 0.195870 second(s), 33 queries , Gzip On.

    © 2014-2017 自学IT吧论坛

    快速回复 返回顶部 返回列表