1. 实战 Kaggle 比赛:图像分类(CIFAR-10)

https://www.kaggle.com/c/cifar-10













2. Q&A

    1. 凸函数表示有最优解。损失函数是个凸函数,但是神经网络大多数都是非凸的,一般神经网络是没有最优解的。
    1. momentum表示把曲线变得平滑一点。
    1. Scheduler 前期选择的学习率大一点,后期学习率变小一点。类似年轻的时候多出去看看。
    1. sgd 相当于做了regular的作用,所以sgd比别的算法好一点。

参考

https://www.bilibili.com/video/BV1Gy4y1M7Cu?p=1

实战 Kaggle 比赛:图像分类(CIFAR-10) 动手学深度学习v2相关推荐

  1. 动手学深度学习v2 p1引言 监督学习与无监督学习

    1.引言 1.2. 机器学习中的关键组件 首先介绍一些核心组件.无论什么类型的机器学习问题,都会遇到这些组件: 可以用来学习的数据(data): 如何转换数据的模型(model): 一个目标函数(ob ...

  2. 动手学深度学习 v2 视频版

    动手学深度学习 v2 01 课程安排 目标 内容 形式 你将学到什么? 资源 02 深度学习介绍 AI 地图 图片分类 物体检测和分割 样式迁移 人脸合成 文字生成图片 文字生成 03 安装 本地安装 ...

  3. new 动手学深度学习V2环境安装

    动手学深度学习V2 环境安装 虚拟环境 d2l-zh安装 conda create -n d2l-zh -y python=3.8 pip pip install jupyter d2l torch ...

  4. 使用AWS最便宜的GPU实例  from 动手学深度学习v2 李沐大神

    使用AWS最便宜的GPU实例  from 动手学深度学习v2 李沐大神 视频链接https://www.bilibili.com/video/BV1MA411L78X?t=493 由于购买的电脑没有配 ...

  5. 57 长短期记忆网络(LSTM)【动手学深度学习v2】

    57 长短期记忆网络(LSTM)[动手学深度学习v2] 深度学习学习笔记 学习视频:https://www.bilibili.com/video/BV1JU4y1H7PC/?spm_id_from=a ...

  6. 【动手学深度学习v2李沐】学习笔记07:权重衰退、正则化

    前文回顾:模型选择.欠拟合和过拟合 文章目录 一.权重衰退 1.1 硬性限制 1.2 柔性限制(正则化) 1.3 参数更新法则 1.4 总结 二.代码实现 2.1 从零开始实现 2.1.1 人工数据集 ...

  7. 李沐动手学深度学习v2/总结1

    总结 编码过程 数据 数据预处理 模型 参数,初始化参数 超参数 损失函数,先计算损失,清空梯度(防止有累积的梯度),再对损失后向传播计算损失关于参数的梯度 优化算法,使用优化算法更新参数 训练求参数 ...

  8. 《动手学深度学习v2》之细致解析(1)内容及介绍及安装

    前言 作者来自北京某不知名985,现在是本科在读学生,专业是数据科学与大数据技术,班上同学都太卷了,没办法,需要学习深度学习,经大佬介绍,在B站上找到了一个很不错的资源,李沐老师的<动手学深度学 ...

  9. 动手学深度学习V2——李沐Bilibili直播视频Jupyter Notebook安装

    在哔哩哔哩上发现李沐是视频直播讲解<动手学深度V2>- Pytorch,准备按照视频中的安装教程来搭建一个新的虚拟环境d2l,李沐使用的是Jupyter Notebook 而不是 Pych ...

  10. 08 线性回归 + 基础优化算法【动手学深度学习v2】

    线性回归 输出层不当成一层 输入层和权重层放一起 x和y是列向量 因为loss=1/2(y-y_hat)^2 又因为y_hat的平均值=1/n(xi*w+b)=1/n(Xw+b) 唯一一个有显示解的模 ...

最新文章

  1. gnome mysql client_解决MySQLWorkbenchgnome-keyring-daemon错误的方法分享
  2. linux unshare 命令,详解Linux Namespace之User
  3. 一步一步写算法(之查找)
  4. js实现一套代码来控制所有的运动,图片的淡入淡出,winth,height的变宽
  5. zabbix邮件报警功能的验证
  6. Asp.net(C#)年月日时分秒毫秒
  7. 消费贷之京东白条、蚂蚁花呗和银行信用卡的那些分期“低费率”套路
  8. Linux 下安装与设置Vim编辑器
  9. 走向世界中的我国摄影测量与遥感 ——访中国测绘学会理事长、国家测绘局原副局长杨凯
  10. Hello World, Hello Me | 图灵人工智能书单
  11. 【10.16 胡测】Day4 第四波胡策题
  12. opencv+python机读卡识别(一)预处理
  13. android 高仿ios时间选择器,仿ios时间选择
  14. 计算机新建怎么没有表格,为何我的电脑新建项目里没有EXCEL表格呢,
  15. BUAA(2021春)查家谱(士谔书院16级期末)——找最近公共祖先(已上传测试数据和代码)
  16. 2021年中国汽车产销量、出口情况及市场格局分析:新能源汽车产销量创历史新高[图]
  17. nvm安装使用及卸载
  18. python刷今日头条访问量_Python 自动刷博客浏览量实例代码
  19. NGUI图集分解 切割
  20. 〖Python零基础入门篇㊼〗- 包与模块

热门文章

  1. Android实现计算器布局(表格布局)
  2. python数据分析工具_python数据分析工具 | pandas
  3. 二维均匀分布的边缘密度函数_均匀分布
  4. iframe 父页面与子页面之间的方法、属性的相互调用
  5. Spring MVC 全局异常处理(1) --HandlerExceptionResolver
  6. Android文件的保存(本地和SD卡)与读取
  7. SDOI2015 序列统计
  8. 【渗透】浅谈webshell隐藏
  9. 多线程编程(16) - 多线程同步之 WaitableTimer (等待定时器对象)[续二]
  10. springmvc和layui富文本编辑器实时上传图片功能实现