文章目录

  • 一、引言
  • 二、Midimax 压缩算法
  • 三、Python 实践

一、引言

CSDN 叶庭云:https://yetingyun.blog.csdn.net/

在实际时间序列场景中,例如金融时序数据,经常需要先对其进行可视化以方便我们了解数据,但金融时间序列数据量一般来说是非常巨大的,所以直接可视化的话需要花费较多的 RAM,磁盘等计算存储资源,本文介绍一种时间序列压缩算法 “Midimax”,该算法能够压缩时间序列数据并尽可能最大化保留原始时间序列数据信息(学通信的同学可能更清楚信号压缩的关键原理和注意事项~~)。该算法的设计有如下几点目标:

  • 不引入非实际数据,只返回原始数据的子集。所以没有平均、插值、回归和统计聚合等;
  • 计算高效,有较低的时间复杂度和空间复杂度;
  • 最大化信息增益。这意味着它尽可能多地捕捉原始数据中的变化;
  • 由于取最小和最大点可能会给出夸大方差的错误观点&#x

高效的大型时间序列数据压缩方法 MidiMax 压缩算法 | 让时间序列可视化更容易相关推荐

  1. 时间序列预测方法及多步预测方法汇总

    本文转载自 https://zhuanlan.zhihu.com/p/471014006 时间序列多步预测方法 https://zhuanlan.zhihu.com/p/390093091 时间序列预 ...

  2. 基于深度学习的时间序列预测方法

    之前对时间序列预测的方法大致梳理了一下,最近系统的学习了深度学习,同时也阅读了一些处理序列数据的文献,发现对于基于深度学习的时间序列预测的方法,还可以做进一步细分:RNN.Attention和TCN. ...

  3. 大型项目物资管理方法

    大型项目物资管理方法(本人以前作品,也是经历). 兵马未动,粮草先行.项目物资是工程项目如期建成的重要保障,是工程投资成本的关键环节.大型工程项目物资管理主要面对的是工程周期长.工作面广.施工单位多及 ...

  4. matlab变压器紧耦合,一种紧耦合高效llc谐振变压器的制造方法

    一种紧耦合高效llc谐振变压器的制造方法 [专利摘要]本发明公开了一种紧耦合高效LLC谐振变压器,包括磁芯不带气隙的环形主变压器,主变压器的初级线圈一端与输入辅助电感连接:主变压器的第二次级线圈两端分 ...

  5. 《高效团队开发工具与方法》

    一直以来都在用所谓的敏捷开发,但是也只是简单的说,用什么用什么,从开始感觉不方便,到后来感觉习惯了,可没有考虑过到底能带来什么改变,所以最近在上下班的地铁上在看完了<高效团队开发工具与方法> ...

  6. CNN可视化又添新作,南大开源Group-CAM:高效的显著图生成方法|CVPR2021

    点击上方"3D视觉工坊",选择"星标" 干货第一时间送达 作者丨孙裕道 审稿丨邓富城 编辑丨极市平台 导读 最近南京大学的一篇论文收录于CVPR2021,该论文 ...

  7. asm 查看 数据文件 修改 时间_更高效的GMX分段模拟方法:修改tpr文件

    原标题:更高效的GMX分段模拟方法:修改tpr文件 ■2020-11-01 22:42:18 在以前的一篇文章中, 我简单说过基于GROMACS的分段模拟方法 [1] . 这种方法非常通用, 几乎能完 ...

  8. 时间序列预测方法汇总:从理论到实践(附Kaggle经典比赛方案)

    ©作者 | Light 学校 | 中国科学院大学 研究方向 | 机器学习 时间序列是我最喜欢研究的一种问题,这里我列一下时间序列最常用的方法,包括理论和实践两部分.理论部分大多是各路神仙原创的高赞解读 ...

  9. python pandas 日期_python+pandas+时间、日期以及时间序列处理方法

    python+pandas+时间.日期以及时间序列处理方法 先简单的了解下日期和时间数据类型及工具 python标准库包含于日期(date)和时间(time)数据的数据类型,datetime.time ...

最新文章

  1. CentOS下的Memcache安装
  2. Django框架学习索引
  3. Html 教程 (1)简介
  4. 添加 Bash 自定义命令
  5. Angular ɵɵelementStart和ɵɵText的工作原理
  6. 洛谷2296 寻找道路
  7. PHP笔记-获取文件扩展名例子
  8. ES6-Generator使用与改写
  9. 中国电信天翼云进入4.0阶段 打造一朵无处不在的分布式云
  10. php-rabbitmq结合rabbitmq_delayed_message_exchange实现延时队列
  11. 使用BarTender连接Excel打印标签
  12. MySQL 的 max_allowed_packet
  13. 伯努利大数定理(揭示了频率和概率的关系)
  14. 初中计算机教师个人总结报告,初中计算机教师度工作总结工作总结
  15. LintCode 627.最长回文串
  16. 表情分析计算机,利用深度学习和计算机视觉进行面部表情分析
  17. 流程变革,从推倒三座大山开始
  18. shell 编程100例
  19. 选择框,单选框,组合框,列表框
  20. 网络安全立法探讨(Cyber Security Laws discussion):立法是否应该更严格?

热门文章

  1. 能量原理与变分法笔记10:虚位移原理
  2. 当你做了决定后,你觉得麻烦的每件事都会变简单
  3. 关于FPGA设计中的线性序列机和状态机
  4. 如何安装WIZnet库到Raspberry Pi PICO
  5. 查找——平均查找长度
  6. WPS文字如何将纸张大小由A4调整为A3默认纸张大小是A4
  7. 哈夫曼编码解压缩文件 - Java实现
  8. linux系统如何安装编译器,如何安装gfortran编译器
  9. 光模块正确安装步骤及注意事项【图文】
  10. mangodb—分片和副本集架构部署