【python 存储数据 h5py | h5df】【jupyter notebook 大型中间结果存储】

前言：我们在使用python 进行大规模计算的时候，无论是在debug还是在使用jupyter notebook调试的时候，都会遇到“崩溃了！”这个问题！

特别是，某一个程序需要计算很多内容，等很长时间，结果在最后时刻调试的时候崩溃了！！！

使用python我们主要也是为了方便，但是并不是所有内容肯定用numpy的*.npy 格式存下来！这个时候就有了h5py这个东西！

简介：h5py有点像 matlab的mat一样的存在！可以存几乎任何格式的数据内容！！！并且采用*.keys() 也就是dict_作为索引调取对应内容！

1、存储

import h5py
file = h5py.File('all_info.h5','w')
# 写入
file.create_dataset('data', data = data)
file.create_dataset('label', data = label)
file.create_dataset('others',data = others)file.close()

2、调用

import h5py
file = h5py.File('all_info.h5','r')
# 读取
data=file['data']
#如果不知道有哪些内容，那就查询下
print(file.keys())file.close()

报错解决：https://blog.csdn.net/github_36923418/article/details/86135392 TypeError: Object dtype dtype('O') has no native HDF5 equivalent

【python 存储数据 h5py | h5df】【jupyter notebook 大型中间结果存储】相关推荐

Python实战项目：基于jupyter notebook处理16年美国总统大选数据
Python实战项目:基于jupyter notebook处理16年美国总统大选数据设计需求说明源码展示以及实验截图: 总结: 设计需求说明设计任务按照月份求两位候选人民调数据的和,用折线图反 ...
微软发布VS Code Jupyter插件！不止Python！多语言的Jupyter Notebook支持来了！
北京时间 2020 年 11 月 12 日,微软发布了全新的 VS Code Jupyter 插件!Jupyter 插件将 Jupyter Notebook 的功能引入 VS Code,并且将会支持更 ...
微软发布 VS Code Jupyter 插件！不止 Python，多语言的 Jupyter Notebook支持来了！
作者 | formulahendry 来源 | 玩转VS Code(ID:vs_code) 头图 | CSDN 下载自东方IC 北京时间 2020 年 11 月 12 日,微软发布了全新的 VS C ...
学习Python的做笔记神器——Jupyter Notebook
学习Python的做笔记神器--Jupyter Notebook 给想学好Python的同学们安利一波,Jupyter Notebook是学习Python最好的做笔记环境,没有之一哦. Jupyter ...
python list数据等间隔抽取并新建list存储~ 非常简单
python list数据等间隔抽取并新建list存储~ 非常简单使用切片即可更多切片操作: Python 列表切片 - Hubery_Jun - 博客园 https://www.cnblogs. ...
vscode怎样导入数据_【Python开发】用VSCode+Jupyter notebook 编写 Python
版权声明:小博主水平有限,希望大家多多指导.本文仅代表作者本人观点. 1.过去,想要在 VSCode 中运行 Jupyter notebook 需要安装一个 Neuron 扩展,我也装过,感觉很强大. ...
数据科学工具 Jupyter Notebook 教程(一)
ipython notebook 是一个基于浏览器的 python 数据分析工具,使用起来非常方便,具有极强的交互方式和富文本的展示效果.jupyter 是它的升级版,它的安装也非常方便,一般 Ana ...
python入门：Anaconda和Jupyter notebook的安装与使用
文章目录一.安装和使用Anaconda 1.anaconda是什么? 2.为什么需要安装anaconda? 3.如何安装anaconda? 通过官网下载页面开源软件下载安装步骤: 4.jupyt ...
python金融分析小知识(38)——Jupyter Notebook更改文件路径
Hello 大家好,我是一名新来的金融领域打工人,日常分享一些python知识,都是自己在学习生活中遇到的一些问题,分享给大家,希望对大家有一定的帮助! 大家好,好久不见我又来啦!今天要给大家分享的小 ...

【python 存储数据 h5py | h5df】【jupyter notebook 大型中间结果存储】

【python 存储数据 h5py | h5df】【jupyter notebook 大型中间结果存储】相关推荐

最新文章

热门文章