机器学习速成过拟合的风险和泛化

大家好，今天我们学习【机器学习速成】之过拟合的风险和泛化。 泛化是指模型很好地拟合以前未见过的新资料的能力。我们之前曾提到过， 仅仅拟合训练资料并不足以进行机器学习。 对于机器学习，其实我们感兴趣的是泛化。 我们来深入探讨一下这个主题。我们马上学三点，直观理解…

2019-12-24 科技 我要分享

怎样构建深度学习模型？六步走 时刻小心过拟合

想要训练个深度神经网络，也准备好了可以直接用的数据，要从哪里开始上手？来自美国的Harry Khanna，精心编织了一套六步法。大家可以瞻仰一下，然后决定要不...

2018-07-03 科技 我要分享

教程|从检查过拟合到数据增强 一文简述提升神经网络性能方法

选自towardsdatascience 作者：Rohith Gandhi 机器之心编译 参与：Nurhachu Null、路 本文简要介绍了提升神经网络性能的方法，如检查过拟合、调参、算法...

2018-05-31 科技 我要分享

机器学习技术能够有效用于选股吗？（上）

未经授权，严禁转载前言译者翻译了一篇讨论机器学习在量化投资中应用的文章。机器学习在量化金融中是一个日渐重要且充满争议的话题。关于机器学习是否能成为一个实用的投资工具的争论一直存在。尽管机器学习算法可以发现微妙且非线性的关系，从充满噪音的历史资料中提取资讯可能…

2019-09-12 科技 我要分享

学界|Hinton提出的经典防过拟合方法Dropout 只是SDR的特例

选自arXiv 作者：Noah Frazier-Logue、Stephen José Hanson 机器之心编译 参与：Geek AI、王淑婷 Hinton 等人提出的 Dropout 方案在避免神经网络过拟合上...

2018-08-29 科技 我要分享

万万没想到 Google给Dropout申请了专利 而且刚刚生效

机器之心报道机器之心编辑部机器学习模型训练中，过拟合现象实在令人头秃。而 2012 年 Geoffrey Hinton 提出的 Dropout 对防止过拟合有很好的效果。之后大量 Dropout 变体涌现，这项技术也成为机器学习研究者常用的训练 trick。万…

2019-09-24 科技 我要分享

CNN手把手维修攻略：你的网络不好好训练 需要全面体检

作者 Zeyad Emam方栗子 郭一璞 编译量子位 出品 | 公众号 QbitAI您吃了么？你的CNN还健在么？Github用户Zeyad Emam贡献了一篇CNN故障排除攻略，详细介绍了CNN...

2018-08-17 科技 我要分享

在ML中缺乏资料可是个大问题 亲测有效的5种方法帮您解决

点选上方关注，All in AI中国在我做过的很多专案中，公司虽然有非常棒的AI商业创意，但当他们意识到自己没有足够的资料时，却会慢慢的变得沮丧起来。然而，确实有解决的方案。本文的目的是简要地向你介绍其中的一些在我的实践中已经证明有效的方法，而不是列出所有现有…

2020-01-05 科技 我要分享

机器学习速成为什么要拆分为三个集：训练集、验证集、测试集

大家好，今天我们学习【机器学习速成】之 为什么要拆分为三个子集：训练集、验证集、测试集我们 马上学三点 ，只划分训练集和测试集的不足验证集在划分方案中的重要性训练集、测试集、验证集三者区别大家可以点选下面的“ 了解更多 ”，或搜寻“ 马上学123 ”，线上观看…

2019-12-09 科技 我要分享

Epoch vs Batch Size vs Iterations最最基本的概念的介绍

作者：SAGAR SHARMA编译：ronghuaiyang导读今天给大家介绍几个非常基础的概念：Epoch vs Batch Size vs Iterations，这三个东西几乎在所有的机器学习程式码中都会出现。你一定有过这样的经历，当你看着屏幕，挠头思考“…

2019-12-30 科技 我要分享

Boosting和Bagging: 如何开发一个鲁棒的机器学习演算法

作者：Ben Rogojan编译：ronghuaiyang导读机器学习和资料科学需要的不仅仅是将资料放入python库中并利用得到的结果。资料科学家需要真正理解资料和资料背后的过程，才能实现一个成功的系统。这篇文章从Bootstraping开始介绍，让你听懂什…

2019-12-29 科技 我要分享

[xss_clean]

用AI搞视频编解码器，现在路子有点"野"。插帧、过拟合、语义感知、GAN……你想过这些"脑洞"或AI算法，也能被用到编解码器上面吗？例如，原本的算法每帧压缩到16.4KB后，树林开始变得无比模糊：但在

2022-05-08 资讯 我要分享

基于机器学习实现商家和银行交易对账结算

Plaid的API可帮助开发人员为北美数以千万计的消费者提供金融服务。这些服务帮助消费者管理他们的个人财务，让他们转移资金和付款，并允许他们获得贷款和抵押贷款。我们的使命是通过提供对金融系统的访问来改善人们的生活。我们不仅通过帮助消费者访问其财务资料，而且通过…

2020-01-09 科技 我要分享

观点|1cycle策略：实践中的学习率设定应该是先增再降

选自GitHub 作者：Sylvain Gugger 机器之心编译 参与：Tianci LIU、思源 深度模型中的学习率及其相关参数是最重要也是最难控制的超参数，本文将介绍 Leslie...

2018-04-21 科技 我要分享

模型难复现不一定是作者的错，最新研究发现模型架构要背锅

在不同初始化条件下，同一神经网络经过两次训练可以得到相同的结果吗？CVPR2022的一篇研究通过将决策边界（DecisionBoundary）可视化的方法，给出了答案--有的容易，有的很难。例如，从下

2022-05-08 资讯 我要分享

25道题检测你对支援向量机演算法的掌握程度

介绍在我们学习机器算法的时候，可以将机器学习算法视为包含刀枪剑戟斧钺钩叉的一个军械库。你可以使用各种各样的兵器，但你要明白这些兵器是需要在合适的时间合理的地点使用它们。作为类比，你可以将“回归算法”想象成能够有效切割资料的剑，但无法处理高度复杂的资料。相…

2019-09-13 科技 我要分享

技术专栏丨深入解释决策树回归器_节点

无论是在Kaggle这类竞赛中，还是商业环境，决策树回归器都已经是最常用的机器学习演算法之一。决策树可用于分类和回归问题。本文介绍了决策树回归器演算法以及一些高阶话题。 目录 Photo by Todd Quackenbush / Unsplash- …

2019-11-21 科技 我要分享

这可能是史上最全的Python算法集

本文是一些机器人算法（特别是自动导航算法）的Python代码合集。其主要特点有以下三点：选择了在实践中广泛应用的算法；依赖最少；容易阅读，容易理解...

2018-08-17 科技 我要分享

EA 研发出新测试 AI：有望将人工测试员从无聊枯燥的普通测试中解放出来

小人不断跳跃到实时生成的平台上、最后到达终点。你以为这是个类似于微信"跳一跳"的小游戏？但它的真实身份，其实是游戏大厂EA（美国艺电公司）最新研究出的游戏测试AI。和普通只会打游戏的AI不同，这次EA

2022-05-08 资讯 我要分享

经验之谈｜别再在CNN中使用Dropout了

作者：Harrison Jansma编译：ronghuaiyang我注意到有很多关于学习深度学习和将什么是深度学习的资源。但是不幸的是，等到真正需要做一个模型的时候，解释如何去做，何时去做的资源又很少。我写这篇文章的目的是为了那些尝试去实现深度学习的人，这样你…

2019-09-13 科技 我要分享