神经网络在工作的时候,里面到底是什么样?

为了能透视这个“AI黑箱”中的过程,加拿大蒙特利尔一家公司开发一个3D可视化工具Zetane Engine。只需要上传一个模型,Zetane Engine就可以巡视整个神经网络,并且还可以放大网络中的任何一层,显示特征图,看清流水线上的每一步。
目前Zetane Engine不同系统的版本都可以在GitHub网站zetane中找到,也可通过下面链接下载安装包:

深度学习的3D可视化工具Zetane——windows版本

深度学习的3D可视化工具Zetane——Linux版本

(左图为卷积层的特征图,右图为特征图的3D可视化)

可视化AI工作流程

首先,我们需要上传一个模型,上传模型的按钮在启动台左上角Z字标志这里,Zetane Engine支持ONNX、Keras(.h5)以及ZTN三种模型文件。

模型文件格式转换可参考Python将模型参数文件(.pth/.pkl等)转换为ONNX格式

如果手头上还没有模型也没关系,点击界面右上角的Z形图标可以到Zetane Engine的模型库中下载模型:

另外在启动台SNAPSHOTS按钮这里也有一些经典模型可以选择:

例如一个Resnet50网络,输入的图片是一张RGB图:

上传之后,Zetane Engine就绘制出了一条“流水线”,每一层神经网络就像一个个工作间:

这些个小工作间的进展也是透明的,我们可以聚焦到一个归一化层、Relu激活层或者卷积层工作间,点这个图片形状的按钮:

然后这个各层的所有特征图都会在上面显示出来,如卷积层中卷积数值的不同体现为颜色的不同,蓝紫色代表数值较小,红黄色代表数值较大

还可以通过点击这几个地方来查看,输入和输出的各种样式:

其中有排列成三维立体的、标注卷积结果数值的,以及纯数值的应有尽有:

二维视角
三维视角
标注卷积结果的平面图
纯卷积结果的数值平面图

多角度的图像处理在连接层、激活层、归一化层等工作间也同样适用:

激活层特征图

归一化层特征图

到了最后的全连接输出层,模型会输出一个一维向量(下图右边),用来判断图像是哪个类别的。

怎么样?有了这样可视化的工具,是不是感觉AI模型不再是一个黑箱了?

深度学习3D可视化工具——Zetane Engine相关推荐

  1. wandb: 深度学习轻量级可视化工具入门教程

    本文,就来给大家介绍一款新型的机器学习可视化工具,能够让人工智能研发过程变得更加简单明了. wandb: 深度学习轻量级可视化工具入门教程 引言 wandb 验证数据可视化 自然语言处理 重要工具 极 ...

  2. PyTorch深度学习训练可视化工具tensorboardX

    点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达 之前笔者提到了PyTorch的专属可视化工具visdom,参看Py ...

  3. wandb(wb)(weights and biases): 深度学习轻量级可视化工具入门教程

    参考文章:wandb: 深度学习轻量级可视化工具入门教程 这wandb有点蛋疼啊,说登录https://wandb.ai/authorize?signup=true获取API KEY,但貌似要梯子才能 ...

  4. 【深度学习】PyTorch深度学习训练可视化工具visdom

    PyTorch Author:louwill Machine Learning Lab 在进行深度学习实验时,能够可视化地对训练过程和结果进行展示是非常有必要的.除了Torch版本的TensorBoa ...

  5. Wandb(Weights Biases) 深度学习轻量级可视化工具(Sweeps Artifacts)

    wandb是Weights & Biases的缩写,是类似TensorBoard, visdom的一款可视化工具 是属于Python的,不是Pytorch的 wandb是最大的特点是能自动上传 ...

  6. 深度学习半自动标注_时下流行的深度学习数据标注工具

    时下流行的深度学习数据标注工具 迷若烟雨 2018-09-04 16:36:00 15820 收藏 33 分类专栏: 深度学习 版权 本文将标注工具适用的最佳运行环境分成了三类. 跨平台 https: ...

  7. 深度学习 3d人脸 重建_深度学习实时3D人脸跟踪

    深度学习 3d人脸 重建 Snapchat was made popular by putting funny dog ears on people's head, swapping faces an ...

  8. 深度学习数据集标注工具、图像语料数据库等资源

    NLP+VS︱深度学习数据集标注工具.图像语料数据库.实验室搜索ing... 2017年02月07日 12:12:01 阅读数:27032 ~~因为不太会使用opencv.matlab工具,所以在找一 ...

  9. 深度学习图像标注工具汇总

    深度学习图像标注工具汇总 原文地址: https://blog.csdn.net/chaipp0607/article/details/79036312 对于监督学习算法而言,数据决定了任务的上限,而 ...

最新文章

  1. EST | 系统评价污水样品中选定药物、非法药物及其代谢物的稳定性
  2. 扫描到U盘但找不到文件
  3. js map遍历 修改对象里面的值_求职季之你必须要懂的原生JS(上)
  4. centos路由查看命令_CentOS下使用Route命令添加路由
  5. Java对象的引用类型
  6. Alexa与小娜结盟,智能语音助手该呼朋引伴还是独自前行?
  7. JavaFX加载界面报错:fxcontroller can only be applied to root element?
  8. android --- fastboot 协议学习
  9. 通讯与计算机网络作业,通讯与计算机网络作业平时作业(填空题问答和计算题)讲述.doc...
  10. Hive 复制分区表和数据
  11. flask-mail扩展基本使用
  12. 新概念_please send me a card.
  13. 数字图像处理 冈萨雷斯 中文第三版 习题
  14. 6个实例电路,详解雷击浪涌的防护
  15. C++语言for循环实现从1加到100:1+2+3+...+100=
  16. 《系统与网络管理实践》(第三版)作者访谈
  17. shared_ptr,weak_ptr,unique_ptr
  18. 问题 sparksql Caused by: java.lang.OutOfMemoryError: GC overhead limit exceeded
  19. 源码天空java新闻_Java UpdateRequest类代码示例
  20. ASP下使用md5加密注册信息

热门文章

  1. 等级保护认证费用详细_等保费用标准
  2. pureftpd php管理,lnmp之pureftpd管理面板安装教程[图文]
  3. 软件工程第四周学习笔记-----典型用户和场景
  4. Java粗浅认识-java简介
  5. randperm()函数用法
  6. 护壁桩嵌入深度_钻孔灌注桩入岩深度
  7. [附源码]Python计算机毕业设计Django的花店售卖系统的设计与实现
  8. 谁能坐上云计算的第二把交椅?
  9. Week1云计算从0到1学习-感谢公司给我这个机会
  10. 阿朱分享:中国互联网十五年的22个创新模式(转自CSDN)