目前可以说大多数程序的所耗的时间大部分在于数据库查询中。打个比方,程序内部代码跑1秒,数据库查询数据需要10秒,maybe夸大了。

主要通过三种途径提高数据库查询效率:1.SQL的性能优化,2.数据库的性能优化,3.查询优化

1.SQL的性能优化
 SQL语句是用户访问关系数据库中数据的唯一方法,通常在一个关系数据库上,服务器的SQL进程会使用该服务器的60%~90%的资源,大部分数据库的效率的问题都是由于SQL语句编写不善引起的,所以SQL语句的性能优化十分重要。
为了编写出高效的SQL语句,首先应按照一定的具体规范来编写SQL语句,Database administrator 都需要收集和整理一份SQL编码规范。其次实在真实数据库上对这些SQL语句进行性能测试和跟踪并不断调整,到达最优以后才正式上线运行。最后需要强调的是,随着数据量的变化和数据库版本升级后,往往会导致部分SQL性能下降,所以对SQL的跟踪优化是Database administrator的一项持续不断的工作。

2.数据库的性能优化
Database System 是一组程序作用在数据文件上对外提供服务,所以其本身的性能优化也十分重要,对其的优化工作主要是相应的参数调整。
(1) 通过见识database system的内存对象,获得系统性能指标,发现系统的性能缺陷以及原因
(2) 针对导致系统性能缺陷的原因,进行相应的参数调整(如增加数据缓存区的大小)
(3) 跟踪参数调整后系统的各项性能指标,看是否达到预期要求,否则继续调整。
例如,Oracle通常利用定时执行 statspacke.snap 包收集数据库的运行状态,然后利用程序 spreport.sql对两个才几点之间的数据产生报表,以分析这段时间数据库的各种运行指标。Sybase数据库用 sp_sysmon,sp_monitor,sp_configure 命令才采集和分析一段时间内数据库的各种运行指标。

3.查询优化
可以通过如下方法来优化查询的:
(1) 把数据、日志、索引放到不同的I/O设备上,增加读取速度。数据量越大,提高I/O越重要。
(2) 纵向、横向分割表,减少表的尺寸
(3) 根据查询条件,建立索引,优化索引、优化访问方式,限制结果集的数量量。注意填充银子要适当(最好使用默认值0)。索引应该尽量的小,使用自己数小的列建索引好,不要对涌现的几个值的列建立单一索引。
(4) 用OR的子句可以分解成多个查询,并且通过UNION 连接多个查询。它们的速度只与是否使用索引有关,如果查询需要用到联合索引,用UNION ALL执行的效率更高。
(5) 在查询SELECT语句中庸WHERE子句限制返回的行数。避免表扫描。如果返回不必要的数据,浪费了数据库的I/O资源,加重了网络的负担,降低了性能。如果表很大,在表扫描的期间将表锁住,禁止其他的连接访问表,后果很严重。
(6) 注意,在没有必要的时候不要用distinct,它同union一样会使查询变慢。
(7) 在IN后面值得列表中,将出现最频繁的值放在最前面,出现得最少的放在最后面,减少判断的次数。
(8) 一般在 groupby 和 having 子句之前就能剔除多余的行,所以尽量不要用她们来执行剔除工作。
(9) 尽量将数据的处理工作放在服务器上,减少网络的开销,如使用存储过程。存储过程是编译好的,优化过的,并且被组织到一个执行规划里,且存储在数据库中的SQL语句,是控制流语言的集合,速度当然快。

(10) 不要再一句话里再三地使用相同的函数,浪费资源,将结果放在变量里再调用更快。

另外,还可以针对大量只读查询操作进行优化,常见的方法有:

(1) 数据量教教的数据,可以考虑不存储在数据库中,而是通过程序常量的方法解决。

(2) 需要存储在数据库中的数据,可以考虑采用物化视图(索引视图)。当database administrator在视图上创建索引时。这个视图就被物化(执行)了,并且结果集被永久地保存在唯一聚簇索引中。

(3) 数据存储时可以考虑适当的数据冗余,以减少数据库表之间的连接操作,提高查询效率。

(4) 针对数据的特点,采取特定的索引类型,例如位图索引等。

个人遇到过的问题


第二种查询速度比第一种快

怎样提高数据库查询效率相关推荐

  1. sql语句提高数据库查询效率

    可以通过以下多个方面优化sql语句提高数据库查询效率 1. 应尽量避免在 where 子句中使用!=或<>操作符,否则将引擎放弃使用索引而进行全表扫描. 2. 应尽量避免在 where 子 ...

  2. 提高数据库查询效率的八个方法

    当用户在一张大表中采用这个LIKE语句的话,就会发现这个查询语句的运行效率非常的慢.这是什么原因造成的呢?其实,不管是Like 关键字,若采用MATCHES关键字的话,若在大量数据中查找符合条件的记录 ...

  3. [转]详细讲解提高数据库查询效率的实用方法、外键关于性能

    1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引. 2.应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索 ...

  4. 提高数据库查询效率的方法

    优化数据库设计 1.数据字段类型使用varchar/nvarchar 替换 char/nchar,变长字段存储空间小,节省存储空间.在查询的时候小的空间字段搜索效率更高. 2.查询的时候避免全表扫描, ...

  5. 提高MySQL数据库查询效率的几个技巧(转载)

    [size=5][color=Red]提高MySQL数据库查询效率的几个技巧(转)[/color][/size]       MySQL由于它本身的小巧和操作的高效, 在数据库应用中越来越多的被采用. ...

  6. 提高数据库查询速度的几个思路

    提高数据库查询速度的几个思路 : 1.缓存,在持久层或持久层之上做缓存; 2.数据库表的大字段剥离,保证单条记录的数据量很小;  3.恰当地使用索引; 4.必要时建立多级索引;  5.分析Oracle ...

  7. 基于springboot项目中使用docker-compose+es+kibana+logstash+mysql 提高数据查询效率

    基于springboot项目中使用docker-compose+es+kibana+logstash+mysql 提高数据查询效率 1.拉取logstash,kibana,es,mysql镜像 #命令 ...

  8. SQL查询优化方法 提高SQL查询效率 数据库的哪些字段适合添加索引

    如何提高sql的查询效率 在正确的字段上创建索引. 优化查询sql的写法(特别是where语句的写法). 一.数据库的哪些字段适合添加索引 表的某个字段值得离散度越高,该字段越适合选作索引的关键字.主 ...

  9. mysql处理上百万条的数据库如何优化语句来提高处理查询效率

    1.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引. 2.应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索 ...

  10. 提高oracle查询效率

    转载自: http://zhidao.baidu.com/link?url=E_HaRWGF3wCYYKG1l-qg5pNmjsePoH3wo_81Zpf5GaytfIW869RhWTIR6_jGPh ...

最新文章

  1. monkey如何获取app包名
  2. java 扫描所有子类,是否可以获取类的所有子类?
  3. Python自然语言处理
  4. 人脸识别技术法律缺口亟待补上
  5. JEECMS V3.0 常用标签使用说明
  6. vissim跟驰模型_VISSIM是什么工具?你对VISSIM了解多少?
  7. Java中String类的方法及说明
  8. Leetcode 146. LRU 缓存机制
  9. 第十二届 2021年1月 蓝桥杯青少年组省赛C++组 第1题--第3题(scratch实现)
  10. 许志安刘强东倪震:结构性中年危机下的男人们
  11. Java Web乱码分析及解决方式(一)——GET请求乱码
  12. 大量数据丢失且无法恢复!欧洲云服务巨头数据中心起火
  13. android中的Filter接口简介
  14. Spring简单的定时器
  15. Axure 8.1.0.3382 激活码(转)
  16. 记一次结合fiddler逆向破解app注册码
  17. gm21模型python_GM11灰色模型
  18. oracle拆分分区语法详解大全_Oracle分区表详解
  19. dreamweaver网页制作模板
  20. Android显示系统详解

热门文章

  1. 用计算机抽样,利用计算机代替随机数骰子进行随机抽样
  2. bilibili视频下载到电脑本地教程
  3. 为什么说数据不动代码动?移动计算比移动数据更划算?
  4. 毕业之后, 这些年薪50万+的90后程序员都经历了什么?
  5. 华硕Armoury crate 奥创控制中心 卡在安装安装已连接设备中,安装失败,请重新启动,网络连接失败(-101)
  6. 矢量网络分析仪程控软件
  7. 取消全部呼叫转移代码_怎么取消呼叫转移-那些你不知道的功能,手机忘记带也能接电话,一个代码全搞定...
  8. Java能用来做什么的?
  9. [转]我在上海的五年奋斗岁月
  10. 【观察】广州供电局:能源行业产业生态变革新标杆