设为首页收藏本站

自学IT吧论坛

 找回密码
 立即注册
搜索
查看: 4690|回复: 10

数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营

  [复制链接]
  • TA的每日心情

    4 天前
  • 签到天数: 1425 天

    [LV.10]以坛为家III

    1241

    主题

    2773

    帖子

    5887

    积分

    管理员

    Rank: 9Rank: 9Rank: 9

    积分
    5887
    发表于 2017-10-2 17:14:09 | 显示全部楼层 |阅读模式

    1. 基础编程知识夯实


    8 k" P' }, j2 s! J  ^8 F/ K' f" L. @
    • 将学习到Python基础知识、常用库与工程技巧

    • 配合课程讲解与云平台练习及小组讨论,你将掌握python编程技能,数据类型与各种数据结构使用,完成具体任务的函数编写,常用的工程技巧

    • 试验编号SXY001-Python场景练习200题;

      2 S" M! L% \8 ]2 l

    2. 数据获取与存储技能实训


    / K- c) O9 P) `/ z
    • 将学习到爬虫相关知识,对网页信息抓取,清洗,解析与存储

    • 配合课程讲解与云平台练习及小组讨论,你将掌握对工作所需或感兴趣的数据(网页文本、图片等)抓取与解析和数据库存储相关技能。掌握scrapy库对知乎和微博、豆瓣等的数据获取和存储案例。

    • 试验编号SXY002-网页爬虫数据,知乎、微博与新闻网站数据抓取与存储(有更好玩的随时补充)

      2 |0 N4 _  m! p! c& Q- A# K

    3. 数据分析技能实训

    " v2 \2 A4 u% Q% Q" q; K/ p
    • 将学习到数据上的统计计算与分析方法

    • 配合课程讲解与云平台练习及小组讨论,你将掌握对已有数据统计分析和基本决策辅助的能力。熟练查询和使用pandas对txt、csv、office xls等不同类型的数据,读写与多种复杂计算、操作。

    • 试验编号SXY003-数据分析实验,多种格式文件的读写与操作,pandas无障碍操作练习,影评数据统计分析,人口信息分析,美国大选数据分析,区域医疗数据分析


      * \6 [4 g5 @! @8 S+ X' ?


    1 F8 O" g( S# s. j# a9 g  ]

    4. 可视化技能实训


    : d3 x( e% R6 I5 w
    • 将学习到几种可视化库与工具对全局数据和结果做可视化,动态展示结果

    • 配合课程讲解与云平台练习及小组讨论,你将掌握使用matplotlib和seaborn等对数据进行同步分析和可视化展示的能力。

    • SXY004-数据可视化实验,基本的分布与曲线拟合绘图、交通数据可视化、美国大选数据分析可视化等 。

      / i, I5 n/ Q, @
    $ W0 k6 K. f' i; Z+ b

    5. 大数据技能实训

    9 b, w" l3 Q0 ^. M
    • 将学习到hadoop相关知识,基本Map-reduce原理与spark知识

    • 配合课程讲解与云平台练习及小组讨论,你将掌握hadoop部分组件使用方法,手写map-reduce解决大数据处理的方法,及spark完成统计和简单建模的能力。

    • SXY005-大数据技能实验,手写map-reduce完成大数据的统计,海量文本数据处理,spark大数据处理示例、spark mllib分布式机器学习简单建模训练

      7 ?. D5 i4 S* j

    . i' M. `1 k* [. c5 w

    6. 机器学习应用实训


    & W# x- V7 V4 D- z
    • 将学习到针对已有数据进行特征抽取与建模,使用机器学习辅助问题决策的知识

    • 配合课程讲解与云平台练习及小组讨论,你将掌握在已有数据的基础上,如何结合问题场景,进行有效的数据处理与特征抽取,并在此基础上使用多种建模库工具(scikit-learn、xgboost、lightGBM,liblinear,libsvm等)进行机器学习建模与应用的能力。

    • SXY006-机器学习实验,Kaggle泰坦尼克号之灾、自行车租赁、房价预测、电商销量预测、新闻主题分类、文本褒贬分析等案例


      , \4 O% w  }8 i1 h4 k; ~$ T: w

    * @; \% r/ H* x  r2 u" z0 x& Z( l) j. `" F

    5 \# N1 H) D5 Z( I- S& K

    7. 综合应用实训


    ; [4 Q* G1 b' _  p
    • 将完成从数据获取解析、分析可视化到机器学习建模应用的完整案例

    • 配合课程讲解与云平台练习及小组讨论,你将掌握数据科学完整的流程,并能独当一面完成在公开数据(微博、知乎等)上的应用项目。

    • 结业项目,包括数据采集、清洗、存储、分析、可视化和建模等流程的标准化项目。


      " Z3 {  A+ }) Z0 I4 n" Q3 h+ a

    整个流程如下图所示:

    1 P% }# J+ Y; {# V" s, d  a
    . k4 j! J2 N; c6 {

    整个过程学习很烧脑,同时也要严格把控自我时间跟上魔鬼的步伐,一步两步三步,找准自我的节奏~


    ( i7 {# ~& ^: {' p


    7 P, Y2 Y. @6 o$ H) M6 v

    链接:

    游客,如果您要查看本帖隐藏内容请回复

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有帐号?立即注册

    x
  • TA的每日心情
    奋斗
    2020-11-24 15:22
  • 签到天数: 103 天

    [LV.6]常住居民II

    0

    主题

    572

    帖子

    1202

    积分

    永久VIP会员

    积分
    1202
    发表于 2017-10-2 17:50:07 | 显示全部楼层
    数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营
  • TA的每日心情

    2019-3-1 19:56
  • 签到天数: 63 天

    [LV.6]常住居民II

    0

    主题

    199

    帖子

    560

    积分

    Lv3中级程序猿

    Rank: 3Rank: 3

    积分
    560
    发表于 2017-10-2 18:44:59 | 显示全部楼层
    看看什么东西
  • TA的每日心情
    擦汗
    2020-12-4 14:34
  • 签到天数: 838 天

    [LV.10]以坛为家III

    0

    主题

    1038

    帖子

    3027

    积分

    永久VIP会员

    积分
    3027
    发表于 2017-10-2 19:12:09 | 显示全部楼层
    数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营
  • TA的每日心情
    开心
    2021-2-28 23:27
  • 签到天数: 155 天

    [LV.7]常住居民III

    0

    主题

    269

    帖子

    857

    积分

    永久VIP会员

    积分
    857
    发表于 2017-10-2 19:25:07 | 显示全部楼层
    不错的课程
  • TA的每日心情

    2020-12-9 22:34
  • 签到天数: 584 天

    [LV.9]以坛为家II

    4

    主题

    1211

    帖子

    3326

    积分

    永久VIP会员

    积分
    3326
    发表于 2017-10-2 19:44:20 | 显示全部楼层
    thanks
  • TA的每日心情
    开心
    2020-10-15 08:26
  • 签到天数: 343 天

    [LV.8]以坛为家I

    0

    主题

    750

    帖子

    2138

    积分

    永久VIP会员

    积分
    2138
    发表于 2017-10-2 20:22:18 | 显示全部楼层
    666
  • TA的每日心情
    开心
    2018-4-6 10:54
  • 签到天数: 113 天

    [LV.6]常住居民II

    0

    主题

    207

    帖子

    599

    积分

    Lv3中级程序猿

    Rank: 3Rank: 3

    积分
    599
    发表于 2017-10-2 20:24:10 | 显示全部楼层
    数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营
  • TA的每日心情
    开心
    2021-6-14 12:31
  • 签到天数: 107 天

    [LV.6]常住居民II

    1

    主题

    400

    帖子

    1033

    积分

    永久VIP会员

    积分
    1033
    发表于 2017-10-2 22:45:02 | 显示全部楼层
    感谢分享
  • TA的每日心情

    2021-7-16 21:36
  • 签到天数: 841 天

    [LV.10]以坛为家III

    1

    主题

    1409

    帖子

    3816

    积分

    永久VIP会员

    积分
    3816
    发表于 2017-10-2 22:56:28 | 显示全部楼层
    RE: 数据获取存储分析 & 可视化 & 机器学习 & 大数据科学实训营 [修改]
    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    来自学IT吧,高薪等你拿! 立即登录 立即注册
    在线咨询
    在线咨询
    zxit_8@qq.com

    QQ|Archiver|小黑屋|自学IT吧    

    GMT+8, 2021-8-2 18:11 , Processed in 0.098431 second(s), 31 queries , Gzip On.

    © 2014-2017 自学IT吧论坛

    快速回复 返回顶部 返回列表