PostgreSQL 禁用全表扫描的实现

 更新时间:2021年01月27日 10:59:46   作者:瀚高PG实验室  
这篇文章主要介绍了PostgreSQL 禁用全表扫描的实现操作,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧

PostgreSQL可以通过一些设置来禁用全表扫描(FULL SCAN/Seq Scan)

注意:

设置此功能后不是完全避免全表扫描,而是只要有不通过全表扫描能得出结果的就不走全表扫描。

如果什么路都不通,那肯定得全表扫描,不然怎么获取数据。

而且并不是不走全表扫描性能就一定好。

下面展示下这个功能:

查询表结构:

highgo=# \d test
    Table test
 Column |    Type    | Modifiers 
-------------+--------------------------------+-----------
 G   | character varying(50)   | 
 A   | character varying(12)   | 
 M   | timestamp(0) without time zone | 
 W   | character varying(5)   | 
Indexes:
 "s__x0" btree ("G", "A", "M", "W")

先检查视图:

highgo=# select * from pg_db_role_setting ;
 setdatabase | setrole | setconfig 
-------------+---------+-----------
(0 rows)

查询执行计划:

highgo=# explain select "G","Z" from test where "G"='PG';
         QUERY PLAN         
------------------------------------------------------------------------------
 Seq Scan on test (cost=0.00..3.11 rows=1 width=72)
 Filter: (("G")::text = '7e'::text)
(2 rows)

对用户进行限制:

highgo=# alter role xyh set enable_seqscan =off;
ALTER ROLE
 
highgo=# select * from pg_db_role_setting ;
 setdatabase | setrole |  setconfig  
-------------+---------+----------------------
   0 | 26171 | {enable_seqscan=off}

再次查询执行计划:

highgo=# explain select "G","Z" from test where "G"='7e';
         QUERY PLAN         
------------------------------------------------------------------------------
 Index Scan using "s__x0" on test (cost=0.14..8.15 rows=1 width=72)
 Index Cond: (("G")::text = '7e'::text)
(2 rows)

补充:psql 会引起全表扫描的10种sql语句

1、模糊查询效率很低:

原因:like本身效率就比较低,应该尽量避免查询条件使用like;对于like ‘%...%'(全模糊)这样的条件,是无法使用索引的,全表扫描自然效率很低;另外,由于匹配算法的关系,模糊查询的字段长度越大,模糊查询效率越低。

解决办法:首先尽量避免模糊查询,如果因为业务需要一定要使用模糊查询,则至少保证不要使用全模糊查询,对于右模糊查询,即like ‘…%',是会使用索引的;左模糊like

‘%...'无法直接使用索引,但可以利用reverse + function index 的形式,变化成 like ‘…%';全模糊是无法优化的,一定要的话考虑用搜索引擎。出于降低数据库服务器的负载考虑,尽可能地减少数据库模糊查询。

2、查询条件中含有is null的select语句执行慢

原因:Oracle 9i中,查询字段is null时单索引失效,引起全表扫描。

解决方法:SQL语法中使用NULL会有很多麻烦,最好索引列都是NOT NULL的;对于is null,可以建立组合索引,nvl(字段,0),对表和索引analyse后,is null查询时可以重新启用索引查找,但是效率还不是值得肯定;is not null 时永远不会使用索引。一般数据量大的表不要用is null查询。

3、查询条件中使用了不等于操作符(<>、!=)的select语句执行慢

原因:SQL中,不等于操作符会限制索引,引起全表扫描,即使比较的字段上有索引

解决方法:通过把不等于操作符改成or,可以使用索引,避免全表扫描。例如,把column<>'aaa',改成column<'aaa' or column>'aaa',就可以使用索引了。

4、使用组合索引

如果查询条件中没有前导列,那么索引不起作用,会引起全表扫描;但是从Oracle9i开始,引入了索引跳跃式扫描的特性,可以允许优化器使用组合索引,即便索引的前导列没有出现在WHERE子句中。

例如:

create index skip1 on emp5(job,empno); 

全索引扫描

select count(*) from emp5 where empno=7900; 

索引跳跃式扫描

select /*+ index(emp5 skip1)*/ count(*) from emp5 where empno=7900; 

前一种是全表扫描,后一种则会使用组合索引。

5、or语句使用不当会引起全表扫描

原因:where子句中比较的两个条件,一个有索引,一个没索引,使用or则会引起全表扫描。例如:where A=:1 or B=:2,A上有索引,B上没索引,则比较B=:2时会重新开始全表扫描。

6、组合索引

排序时应按照组合索引中各列的顺序进行排序,即使索引中只有一个列是要排序的,否则排序性能会比较差。

例如:

create index skip1 on emp5(job,empno,date); 
select job,empno from emp5 where job='manager'and empno='10' order by job,empno,date desc; 

实际上只是查询出符合job='manager'and empno='10'条件的记录并按date降序排列,但是写成order by date desc性能较差。

7、Update 语句

如果只更改1、2个字段,不要Update全部字段,否则频繁调用会引起明显的性能消耗,同时带来大量日志。

8、对于多张大数据量

(这里几百条就算大了)的表JOIN,要先分页再JOIN,否则逻辑读会很高,性能很差。

9、select count(*) from table;

这样不带任何条件的count会引起全表扫描,并且没有任何业务意义,是一定要杜绝的。

10、sql的where条件要绑定变量

比如where column=:1,不要写成where column=‘aaa',这样会导致每次执行时都会重新分析,浪费CPU和内存资源。

以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。如有错误或未考虑完全的地方,望不吝赐教。

相关文章

  • 关于PostgreSQL JSONB的匹配和交集问题

    关于PostgreSQL JSONB的匹配和交集问题

    这篇文章主要介绍了PostgreSQL JSONB的匹配和交集问题,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2021-09-09
  • postgresql 计算时间差的秒数、天数实例

    postgresql 计算时间差的秒数、天数实例

    这篇文章主要介绍了postgresql 计算时间差的秒数、天数实例,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2020-12-12
  • Postgresql的select优化操作(快了200倍)

    Postgresql的select优化操作(快了200倍)

    这篇文章主要介绍了Postgresql的select优化操作(快了200倍),具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2021-01-01
  • 基于PostgreSQL 权限解读

    基于PostgreSQL 权限解读

    这篇文章主要介绍了基于PostgreSQL 权限解读,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2021-01-01
  • PostgreSQL timestamp踩坑记录与填坑指南

    PostgreSQL timestamp踩坑记录与填坑指南

    这篇文章主要介绍了PostgreSQL timestamp踩坑记录与填坑指南,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2021-01-01
  • 利用OGG实现PostgreSQL实时同步的过程详解

    利用OGG实现PostgreSQL实时同步的过程详解

    本文详细阐述了利用OGG实现PostgreSQL实时同步的全过程,文章通过代码示例和图文结合讲解的非常详细,对大家的学习或工作有一定的参考价值,需要的朋友可以参考下
    2023-11-11
  • PostgreSQL查看带有绑定变量SQL的通用方法详解

    PostgreSQL查看带有绑定变量SQL的通用方法详解

    今天我们要探讨的是 custom执行计划和通用执行计划。这一技术在 Oracle中被称为绑定变量窥视。但 Postgresql中并没有这样的定义,更严格地说,Postgresql叫做custom执行计划和通用执行计划
    2022-09-09
  • Postgresql根据响应数据反向实现建表语句与insert语句的过程

    Postgresql根据响应数据反向实现建表语句与insert语句的过程

    根据已有数据,可构建名为products的表,包含id(自增主键)、title(非空字符串)、progress(非空整数)三个字段,建表后,可通过insert语句插入数据,这种反向操作有助于从现有数据结构出发,快速构建数据库表,并进行数据填充,感兴趣的朋友跟随小编一起看看吧
    2022-02-02
  • 详解PostgreSQL提升批量数据导入性能的n种方法

    详解PostgreSQL提升批量数据导入性能的n种方法

    这篇文章主要介绍了PostgreSQL提升批量数据导入性能的n种方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2021-03-03
  • PostgreSQL表膨胀监控案例(精确计算)

    PostgreSQL表膨胀监控案例(精确计算)

    这篇文章主要介绍了PostgreSQL表膨胀监控案例(精确计算),具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2021-01-01

最新评论