没有合适的资源?快使用搜索试试~ 我知道了~
Adaptive-Gradient-Clipping:TensorFlow 2中最小化自适应梯度剪切(https:arxiv.o...
共8个文件
py:4个
ipynb:2个
md:1个
需积分: 50 1 下载量 155 浏览量
2021-03-04
06:48:24
上传
评论
收藏 66KB ZIP 举报
温馨提示
自适应梯度剪切 该存储库提供了一个最小的实施自适应限幅梯度(AGC)的在TensorFlow 2(如在高性能大规模图像识别提出不进行归1)纸为了训练,而不批次深神经网络属性AGC作为关键成分归一化2 。 鼓励读者查阅该论文,以了解为什么鉴于其最重要的成功,为什么可能希望在不进行批量标准化的情况下训练网络。 我使用此存储库的目标是能够快速训练带有或不带有AGC的浅层网络。 因此,我提供了两个我在下面讨论的Colab笔记本。 关于笔记本 AGC.ipynb :演示使用AGC训练浅层网络(仅0.0021.17百万个参数)。 BatchNorm.ipynb :演示了使用批处理归一化训练浅层网络(仅0.0023.09百万个参数)。 这两个笔记本都是Google Colab上的端到端可执行文件。 此外,他们还利用Google Colab提供的免费TPU(TPUv2-8),使读者可以非常快速地进行
资源推荐
资源详情
资源评论
收起资源包目录
Adaptive-Gradient-Clipping-main.zip (8个子文件)
Adaptive-Gradient-Clipping-main
.gitignore 34B
README.md 4KB
models.py 1KB
BatchNorm.ipynb 67KB
utils.py 378B
agc.py 2KB
AGC.ipynb 70KB
dataloader.py 3KB
共 8 条
- 1
资源评论
量子学园
- 粉丝: 22
- 资源: 4734
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- 徐州市区shp边界文件
- 简易数字频率计设计(原理图、PCB、源码、分析报告)
- 20225207038罗丽文财管专2201班.rar
- Golang:通过Gin框架+Redis+责任链,实现一个简单的钉钉机器人,进行消息处理 ps:多应用版
- 基于cnn和AlexNet的铝材缺陷检测内含数据集和demo原型2种方法
- 2023年各城市PM2.5, PM10, SO2, NO2等环境空气质量数据
- go 语言 实现的 使用modbus 协议 通过DTU tcp 链接 采集数据
- SHELL脚本(全是干货)
- Windows屏幕录屏软件
- 2022年各城市PM2.5, PM10, SO2, NO2等环境空气质量数据
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功