分类：postgresql

2022
04-06

实操MySQL+PostgreSQL批量插入更新insertOrUpdate

目录一、百度百科1、MySQL2、PostgreSQL3、PostgreSQL相对于MySQL的优势二、postgres中insertOrUpdate代码实例1、创建user表2、简单的方式实现3、利用unnest函数实现4、如果数据已存在，就就什么也不做三、相关重点函数简介1、unnest(anyarray)四、userMapper.xml写法五、MySQL中insertOrUpdate代码实例1、建表语句2、普通方式3、ONDUPLICATEKEYUPDATE4、REPLACEINTO5、INSERTIGNOREINTO6、小结一、百度百科1、MySQLMySQL声称自己... 继续阅读 >
2021
12-09

PostgreSQL解析URL的方法

尽管PostgreSQL中支持大量的数据类型，但是对于URL似乎并没有一个相应的类型能够去存储。那么对于URL的数据我们在数据库中要怎么去处理呢？首先还是需要看你要存储的URL数据是用来干嘛的，如果仅仅只是为了在以后查询的时候打印输出，那么用varchar或者text之类的类型不是就可以了吗？但是有的时候我们对于这些URL数据并不仅仅是简单的查询，我们可能希望通过这些URL能够查询一些额外的信息，例如URL的使用的协议、主机名等等。这... 继续阅读 >
2021
10-28

postgresql使用filter进行多维度聚合的解决方法

你有没有碰到过有这样一种场景，就是我们需要看一下某个时间段内各种维度的汇总，比如这样：最近三年我们卖了多少货？有多少订单？平均交易价格多少？每个店铺卖了多少？交易成功的订单有多少？交易失败的订单有多少？等等...，假使这些数据的明细都在一个表内，该这么做呢？有没有简单方式？还有如何减少全表扫描以更改的拿到数据?如果只是简单的利用聚合拿到数据可能您需要写很多sql，具体表现为每一个问题写一段sql相互... 继续阅读 >
2021
09-28

浅谈PostgreSQL表分区的三种方式

浅谈PostgreSQL表分区的三种方式 目录一、简介二、三种方式2.1、Range范围分区2.2、List列表分区2.3、Hash哈希分区三、总结一、简介表分区是解决一些因单表过大引用的性能问题的方式，比如某张表过大就会造成查询变慢，可能分区是一种解决方案。一般建议当单表大小超过内存就可以考虑表分区了。PostgreSQL的表分区有三种方式：Range：范围分区；List：列表分区；Hash：哈希分区。本文通过示例讲解如何进行这三种方式的分区。二、三种方式为方便，我们... 继续阅读 >
2021
07-17

如何使用PostgreSQL进行中文全文检索

目录开始安装插件启动配置Host权限服务器配置分词SCWSzhpaserSQL优化添加自定义词典扩展总结开始安装首先是安装PgSQL，这里我使用的是PgSQL9.6，PgSQL10也刚发布了，有兴趣的可以尝下鲜。PgSQL的安装可以说非常复杂了，除了要安装Server和Client外，还需要安装devel包。为了实现空间索引功能，我们还要安装最重要的PostGIS插件，此插件需要很多依赖，自己手动安装非常复杂而且很可能出错。推荐自动化方式安装，Yum... 继续阅读 >
2021
07-09

PostgreSQL通过oracle_fdw访问Oracle数据的实现步骤

PostgreSQL通过oracle_fdw访问Oracle数据的实现步骤 背景：同一个项目两个系统分别使用了PG库和Oracle库，Oracle是生产库，数据动态更新，现在在PG库中需要实时的获取到更新的数据进行统计，基于此种方式，可以通过ETL的工具实现，但是需要定期进行维护等，于是想着是否可以通过类似于Oracle数据库DBLINK的方式去实现，经过网上查找相关资料，发现可以通过oracle_fdw实现。测试环境：本地搭建测试环境，基础配置如下：Oracle数据库测试服务器（IP:192.168.1.110）：WIN10操作系统，Or... 继续阅读 >
2021
07-04

Centos环境下Postgresql 安装配置及环境变量配置技巧

Centos环境下Postgresql 安装配置及环境变量配置技巧 目录1、yum安装2、从源码安装(推荐)3、配置数据库1、yum安装进去postgresql官网下载界面 PostgreSQL:Downloads选择操作系统选择系统版本，平台信息等会出现具体的安装步骤拷贝脚本，自动执行并创建了数据库实例上面的创建数据库实例sudo/usr/pgsql-13/bin/postgresql-13-setupinitdb允许开机自启动postgresql数据库sudosystemctlenablepostgresql-13操作系统的服务管理命令启动数据库sudosystemctlstartpostgresql-... 继续阅读 >
2021
05-23

在golang xorm中使用postgresql的json,array类型的操作

在golang xorm中使用postgresql的json,array类型的操作 xorm支持各种关系数据库，最近使用postgresql时，总是踩到一些坑，在此记录下解决方式。在使用postgresql的array类型时，查询有点问题，xorm的官方文档给出重写的方式，但是不是很清晰：官方文档链接：http://xorm.io/docs也就是说碰到基础库不支持的类型，需要我们去重写ToDB、FromDB方法，废话不多说直接上代码：比如int8[]类型，自定一个Int64ArraytypeInt64Array[]int64func(s*Int64Array)FromDB(bts[]byte)error{if... 继续阅读 >
2021
05-02

PostgreSQL将数据加载到buffer cache中操作方法

我们都知道数据在缓存中访问远比在磁盘中访问速度要快，那么我们怎么在pg中将指定的数据加载到缓存中呢，这有点类似于Oracle的in-memory。当然要注意并不是把数据加载到内存中就一定是好的，因为相较于磁盘，内存总是有限的，所以一帮我们只是在特殊场合下将需要的数据加载到内存中来加快访问的速度。我们可以使用pg_prewarm插件来将指定的表加载到OSBuffer或者pgsharedbuffer中。安装：bill=#createextensionpg_prewarm;CR... 继续阅读 >
2021
03-30

postgresql 中的时间处理小技巧(推荐)

postgresql 中的时间处理小技巧(推荐) 时间格式处理按照给定格式返回：to_char(timestamp,format)返回相差的天数：(date(time1)-current_date)返回时间戳对应的的日期[yyyy-MM-dd]：date(timestamp)计算结果取两位小数(方便条件筛选)：round((ABS(a-b)::numeric/a),2)*100<10时间运算加减运算'-':前x天/月/年'+':后x天/月/年current_timestamp-interval'xday/month/year...'返回时间戳date_part('day',current_timestamp-time1)两个时间相差的天数... 继续阅读 >
2021
03-09

PostgreSQL数据库中如何保证LIKE语句的效率(推荐)

在任何数据库中使用LIKE语句往往都是令人头疼的一件事，因为不少用户发现LIKE语句效率极低，查看执行计划后发现原来没有走索引，那么在Postgresql数据中LIKE语句的执行效率又是怎样的呢？我们又该如何提高LIKE语句的执行效率呢？ 实验环境数据库环境：PostgreSQL12.3 X86_64  创建虚拟环境：postgres=#createdatabasetestdb01ownerhighgo;CREATEDATABASEpostgres=#\ctestdb01highgotestdb01=#... 继续阅读 >
2021
03-07

python 插入Null值数据到Postgresql的操作

数据库中最好插入Null值。在python中，暂时没找到通过sql语句的方式插入Null值。推荐使用轮子的方法definsert_sample_data(self,values):#addedselfsinceyouarereferencingitbelowwithself.con.cursor()ascur:sql="insertintosampletablevalues(%s,%s,%s)"#Use%sforparameterscur.executemany(sql,values)#Passthelistoftuplesdirectlyself.con.commit()list1=[(1100,'abc','{"120... 继续阅读 >
2021
03-05

postgresql的jsonb数据查询和修改的方法

什么是jsonb由PostgreSQL文档定义的数据类型json和jsonb几乎相同;关键的区别在于json数据存储为JSON输入文本的精确副本，而jsonb以分解的二进制形式存储数据;也就是说，不是ASCII/UTF-8字符串，而是二进制代码。本文主要讲的是如何随心所欲的查询和修改postgresql中jsonb格式的数据一、查询简单查询#存储的是key-value格式的数据，通过指定的key获取对应的值#使用->返回的结果是带引号的select'{"nickname":"goodspeed","av... 继续阅读 >
2021
03-05

PostgreSQL 数据库跨版本升级常用方案解析

PostgreSQL 数据库跨版本升级常用方案解析 大家好，我是只谈技术不剪发的Tony老师。对于企业而言，将数据库系统升级到新版本通常可以获得更好的性能、更多的功能、最新的安全补丁和错误修复等。因此，本文就来介绍一下PostgreSQL数据库版本升级的3种常用方案。升级方案概述PostgreSQL版本号由主要版本和次要版本组成。例如，PostgreSQL12.4中的12是主要版本，4是次要版本；PostgreSQL10.0之前的版本由3个数字组成，例如9.6.19，其中9.6是主要版本，19是... 继续阅读 >
2021
02-21

详解PostgreSQL 实现定时任务的 4 种方法

详解PostgreSQL 实现定时任务的 4 种方法 数据库定时任务可以用于实现定期的备份、统计信息采集、数据汇总、数据清理与优化等。PostgreSQL没有提供类似Oracle、MySQL以及MicrosoftSQLSever的内置任务调度功能，因此本文给大家介绍一下PostgreSQL数据库中实现定时任务的4种方法。操作系统定时任务Linux定时任务（crontab）或者Windows任务计划程序（TaskScheduler）为我们提供了一个实现定时任务传统的方法。以crontab为例，我们可以使用以下命令编辑任务... 继续阅读 >