关键词：
Kaggle大数据竞赛平台入门
大数据竞赛平台,国内主要是天池大数据竞赛和DataCastle,国外主要就是Kaggle.Kaggle是一个数据挖掘的竞赛平台,网站为:https://www.kaggle.com/.很多的机构,企业将问题,描述,期望发布在Kaggle上,以竞赛的方式向广大的数据科学家征集解决方案,体现了集体智慧这一思想.每个人在网站上注册后,都可以下载感兴趣项目的数据集,分析数据,构造模型,解决问题提交结果.按照结果的好坏会有一个排名,成绩优异者还可能获得奖金/面试机会等.
图1展示了进入Kaggle官网后显示的正在进行的比赛,这些比赛的类型是不同的,可以进行筛选显示,有All Categories,Faatured,Recruitment,Research,Playground,Getting Started,In Class这7个选项.显示为Featured的比赛(左侧有粉红色条条)一般奖金比较丰厚,竞争也比较大;显示为Research的比赛(左侧有黄色条条),奖金少一些;显示为Recruitment的比赛,虽然没有奖金,但是却可以获得发布项目公司的实习/面试机会,这也给企业招聘人才提供了另外一种方式.显示为Playground的为练习赛,主要用于初学者练手,对于初学者,建议从这里开始.Getting Started里面手把手教你一步一步地进行数据挖掘,是很好的入门教程.除了这些公开比赛,Kaggle还会想活跃的参与者提供私下的比赛,以及为大学团体提供Kaggle-In-Class项目.Kaggle的博客No Free Hunch也是一个好的学习去处,提供了Data Science News,Kaggle News,Kernels,Tutorials,以及Winner's Interviews这些栏目.
图1 Kaggle首页
比赛流程:
1.进去感兴趣的竞赛项目,下载数据集(csv格式),数据集中一般包括训练数据集和测试数据集,查看数据描述和任务描述,明确需求;
2.用你擅长的任何语言或者算法来构建模型,用训练集来训练,然后用训练好的模型推测测试集的labels,生成一个测试集labels作为最终的提交文件;
3.系统会从所提交文件中选取25%的数据进行初评,根据评测结果得到准确率和排名.在比赛结束时,采用剩下的75%的数据进行终评,作为最后的准确率.
Kernels:
Kernels提供了数据分析的环境,数据集,代码和输出样式,点击进去是下面这样的: 这类似于Jupyper Notebook.在这里面可以直接编译python,可以在code和markdown之间自由切换,可以很方便地复现和分享.还有一点就是你可能不需要将数据集下载下来,也不需要配置本地的python以及各种库(比如pandas,numpy等),直接在网页上进行数据挖掘.Kernel上还可以分享代码(初学者好的学习去处),在Forum(论坛)回答问题还可以积分.
参考文献:
[1] Kaggle机器学习竞赛冠军及优胜者的源代码汇总: http://suanfazu.com/t/kaggle/230
[2] Approaching (Almost) Any Machine Learning Problem | Abhishek Thakur
kaggle初学者五步入门指南，七大诀窍助你享受竞赛
Kaggle是一个流行的数据科学竞赛平台，已被谷歌收购，参阅《业界|谷歌云官方正式宣布收购数据科学社区Kaggle》。作为一个竞赛平台，Kaggle对于初学者来说可能有些难度。毕竟其中的一些竞赛有高达100万美元的奖金池和数百位... 查看详情
kaggle竞赛丨入门手写数字识别之knncnn降维(代码片段)
...过Kaggle这个平台来提升一下自己的应用能力，培养自己的数据分析能力。我个人的计划是先从简单的数据集入手如手写数字识别、泰坦尼克号、房价预测，这些目前已经有丰富且成熟的方案可以参考，之后关注未来就业的方向如... 查看详情
fashion_mnist--kaggle入门篇(代码片段)
...并且独立完成一个竞赛项目的同学。本文以湖南农业大学数据专业kaggle竞赛为例，入门讲解一篇竞赛的全流程与代码简介。https://www.kaggle.com/competitions/classifying-the-fashion-mnist/submit本文所用深度学习框架为：paddle飞浆，... 查看详情
比赛教程-如何参加kaggle数据科学比赛（上）
引言：上篇Kagging金大叔的数据科学之路（一）提到我加入Kaggle3个月又27天，拿下两枚银牌成为Expert，全球排名Top2.5%。今天来撸一撸如何Kaggle比赛。（为什么要参加Kaggle比赛，再作探讨#TODO#）万物皆数据，数据科学特别是机器学... 查看详情
titanic生存预测（kaggle入门赛）——基于r语言
Titanic生存预测 ——数据模型汇总报告摘要 R语言多元统计分析课程是一门综合理论和实践的大课程，既需要我们掌握基本的多元统计分析技术理论，又需要针对具体问题在R的环境中实现。 ... 查看详情
国内顶级赛事ccfbdci即将开赛！
...赛事 主办单位：中国计算机学会近年来，随着大数据与人工智能技术的发展，数据竞赛以迅猛之势进入大众视野。国外的kaggle平台率先以竞赛开启数据科学进阶之路，而国内DataFountain等数据竞赛平台也应势而起&#... 查看详情
《机器学习及实践--从零开始通往kaggle竞赛之路》
《机器学习及实践--从零开始通往Kaggle竞赛之路》在开始说之前一个很重要的Tip：电脑至少要求是64位的，这是我的痛。断断续续花了个把月的时间把这本书过了一遍。这是一本非常适合基于python入门的机器学习入门的书籍，全... 查看详情
kaggle比赛含金量
...高。许多科技巨头在Kaggle举办Recruitment类的竞赛用于招聘数据科学家，比如 Facebook、Amazon、Walmart。Featured类的比赛为解决商业问题而设立，是Kaggle平台最主要的竞赛类型，奖金高竞争激烈，有金银铜牌奖励，对参赛选手的能... 查看详情
动手学深度学习17-kaggle竞赛实践小项目房价预测(代码片段)
kaggle竞赛获取和读取数据集数据预处理找出所有数值型的特征，然后标准化处理离散值特征转化为DNArray后续训练训练模型k折交叉验证预测样本，并提交结果kaggle竞赛本节将动手操作实践一个kaggle比赛，房价预测。可以先将未经... 查看详情
在比特币上构建机器学习竞赛市场(代码片段)
...构。如何在比特币上进行机器学习竞赛Kaggle是一个流行的数据建模和数据分析分析竞赛平台，之前已被Google收购。Kaggle竞赛中包括了很多由Kaggle、Facebook、 查看详情
从0到1走进kaggle
...le是什么-如何参赛-解决问题一般步骤-进一步：-如何探索数据-如何构造特征-提交结果kaggle是什么？Kaggle是一个数据科学竞赛的平台，很多公司会发布一些接近真实业务的问题，吸引爱好数据科学的人来一起解决。https://www.kaggle.... 查看详情
最实用的深度学习教程practicaldeeplearningforcoders(kaggle冠军jeremyhoward亲授)
JeremyHoward在业界可谓大名鼎鼎。他是大数据竞赛平台Kaggle的前主席和首席科学家。他本人还是Kaggle的冠军选手。他是美国奇点大学（SingularityUniversity）最年轻的教职工。曾于2014年，作为全球青年领袖，在达沃斯论坛上发表主题... 查看详情
数据挖掘竞赛kaggle初战——泰坦尼克号生还预测(代码片段)
...分泰坦尼克号乘船人员的信息与最后生还情况，利用这些数据，使用机器学习的算法，来分析预测另一部分人员最后是否生还。题目练习的要点是语言和数据分析的基础内容(比如python、numpy、pandas等)以及二分类算法。数据集包... 查看详情
kaggle竞赛实践
参考：(10条消息)【Kaggle】参加竞赛基本流程（以Titanic为例）_Vincent__Lai的博客-CSDN博客(9条消息)Kaggle竞赛——Titanic泰坦尼克之灾（0.76315==＞0.79186）_Apollo丶小杨的博客-CSDN博客(9条消息)Kaggle竞赛——Tit... 查看详情
在kaggle的使用新闻预测股票涨跌的ai建模竞赛(2-sigma赞助)
...新闻分析的内容来预测股价表现吗？如今无处不在的数据使投资者能够以任何规模做出更好的投资决策。这个竞赛在于提取和解释数据以确定哪些数据有用，在这个信息海洋中找到信号。TwoSigma对这一挑战充满热情，... 查看详情
kaggle出了一本竞赛书（500页）！
Datawhale分享 内容：竞赛干货，来源：Kaggle竞赛宝典今天看到了kaggle出版了一本最新的竞赛书籍，该书籍内容涵盖了Kaggle的介绍，各种Kaggle的建模问题以及建模的技巧，同时还讲述如何利用Kaggle的经历来... 查看详情
我，14岁初中生，从零开始拿到了kaggle竞赛冠军
...在机器学习圈里，就有一个14岁靠一己之力成为著名数据竞赛平台的冠军。他叫AndyWang，是一名来自美国华盛顿州Redmond的华裔，最近刚上高一。他向我们介绍了自己如何从零开始，成为Kaggle竞赛冠军的心路旅程。... 查看详情
python机器学习入门模型优化（以决策树为例），来自kaggle竞赛(代码片段)
fromsklearn.metricsimportmean_absolute_errorfromsklearn.treeimportDecisionTreeRegressor#此函数用于返回模型拟合效果，用绝对平均误差评估'''max_leaf_nodes决策树分叶数train_X训练集自变量val_X测试集自变量train_y训练集因变量val_y测试集因... 查看详情