百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

你不知道的PostgreSQL数据库安装及实现跨库查询PG和Oracle

nanshan 2025-03-12 18:53 12 浏览 0 评论


PG作为近几年最火热的关系型数据,已经被很多开发者所使用,尤其是5G网络普及完毕后,IOT和AI的应用场景下,数据的读写速度要求非常高,MYSQL已经开始不能满足高强度的数据吞吐(这里有争议,这里只是说单台服务的情况,使用负载的不在此讨论范围),ORACLE数据由于其不是开源项目,导致很多开发者在进行技术选型的时候,不会优先选择ORACLE作为第一选择,这时候PG作为一款可以媲美ORACLE的开源关系型数据库的优势就很明显了。下面我来介绍一下在CentOS下安装PG和使用PG进行跨库查询PG和ORACLE。

环境准备

一台CentOS7的Lunix服务器。

PostgreSQL 10.10, 64-bit,官网
https://www.postgresql.org/进行下载(window或者lunix都可以直接下载,我们这里使用yum进行镜像下载)

PG安装步骤如下:

1.安装rpm文件

yum install https://download.postgresql.org/pub/repos/yum/reporpms/EL-7-x86_64/pgdg-redhat-repo-latest.noarch.rpm

2.安装PG客户端

yum install postgresql10

3.安装服务端

yum install postgresql10-server

4.初始化PG

/usr/pgsql-10/bin/postgresql-10-setup initdb

5、设置自动启动并且启动postgresql服务

systemctl enable postgresql-10
systemctl start postgresql-10

下面进行PG数据库初始化,创建用户和数据库,步骤如下:

1.切换用户到postgres(PG安装成功后会自动创建postgres,初始化没有密码)

su - postgres

2.登陆postgresql数据库

3.创建用户和数据库

create user admin with password 'admin';            // 创建用户
create database iot_admin owner admin;                 // 创建数据库
grant all privileges on database iot_admin to admin;   // 授权

4、退出psql

\q

PG在安装之后,默认不开启远程访问的,需要手动开启远程访问,步骤如下

1、修改
/var/lib/pgsql/10/data/postgresql.conf文件,取消 listen_addresses 的注释,将参数值改为“*”

2、修改
/var/lib/pgsql/10/data/pg_hba.conf文件,增加下图红框部分内容

3.切换root用户后,重启PG服

su - root
systemctl restart postgresql-10.service

4.使用Navicat连接PG


到这里PG已经正常安装到CentOS上,并且已经正常连接了。

下面我们来介绍PG最为强大的fdw功能

什么是fdw,我们来说下业务场景,比如我想做获取其他服务器上的的数据,一般情况我们的获取方式都是使用webservice或者rest-api接口的方式进行获取,有了fdw之后,我们可以直接将服务器上数据库的表映射(可以理解为一种特殊的外部数据接口),这样我们就可以直接读取我们自己库上映射的表进行数据构建,这里可能会有人认为接口也可以实现这种功能,我想说的是,接口总时有一定的延迟性的,而且映射过来的表我们是可以使用join来进行数据关联的,这也极大的方便了我们的开发和应用。

下面我来介绍使用Postgreslq_fdw来实现跨库查询Postgresql和使用Oracle_fdw来查询Oracle

使用Postgresql_fdw实现跨库查询Postgreql库(使用Navicat进行操作)

根据上文,我们已经创建了一个数据库iot_admin

1.我们新建一个数据库iot_all



2.这里我们在iot_admin中新建一张表base_user,

然后将base_user的数据同步到iot_all中。


iot_admin的建表SQL语句如下:

CREATE TABLE "public"."base_user" (

"id" varchar(64) COLLATE "pg_catalog"."default" NOT NULL,

"username" varchar(255) COLLATE "pg_catalog"."default",

"password" varchar(255) COLLATE "pg_catalog"."default",

"name" varchar(255) COLLATE "pg_catalog"."default",

"birthday" varchar(255) COLLATE "pg_catalog"."default",

"address" varchar(255) COLLATE "pg_catalog"."default",

"mobile_phone" varchar(255) COLLATE "pg_catalog"."default",

"tel_phone" varchar(255) COLLATE "pg_catalog"."default",

"email" varchar(255) COLLATE "pg_catalog"."default",

"sex" varchar(1) COLLATE "pg_catalog"."default",

"status" varchar(1) COLLATE "pg_catalog"."default",

"description" varchar(255) COLLATE "pg_catalog"."default",

"crt_time" timestamp(6),

"crt_user" varchar(255) COLLATE "pg_catalog"."default",

"crt_name" varchar(255) COLLATE "pg_catalog"."default",

"crt_host" varchar(255) COLLATE "pg_catalog"."default",

"upd_time" timestamp(6),

"upd_user" varchar(255) COLLATE "pg_catalog"."default",

"upd_name" varchar(255) COLLATE "pg_catalog"."default",

"upd_host" varchar(255) COLLATE "pg_catalog"."default",

"attr1" varchar(255) COLLATE "pg_catalog"."default",

"attr2" varchar(255) COLLATE "pg_catalog"."default",

"attr3" varchar(255) COLLATE "pg_catalog"."default",

"attr4" varchar(255) COLLATE "pg_catalog"."default",

"attr5" varchar(255) COLLATE "pg_catalog"."default",

"attr6" varchar(255) COLLATE "pg_catalog"."default",

"attr7" varchar(255) COLLATE "pg_catalog"."default",

"attr8" varchar(255) COLLATE "pg_catalog"."default",

"delete_flag" int2 NOT NULL DEFAULT 0,

"user_type" int2 NOT NULL DEFAULT 0,

"office_id" varchar(64) COLLATE "pg_catalog"."default",

"company_id" varchar(64) COLLATE "pg_catalog"."default",

"is_frist_login" varchar(10) COLLATE "pg_catalog"."default"

)

;

ALTER TABLE "public"."base_user" ADD CONSTRAINT "pk_base_user" PRIMARY KEY ("id");


3.在iot_all中安装FDW插件

SQL如下:

CREATE EXTENSION postgres_fdw;

4.在iot_all中创建iot_admin的远程服务

CREATE SERVER admin_server

FOREIGN DATA WRAPPER postgres_fdw

OPTIONS (host '10.100.2.156', port '5432', dbname 'iot_admin');

数据库ip 端口 数据库名称

5.验证服务创建成功

SELECT * from pg_foreign_server;


6.创建user mapping 相当于用户数据映射,将服务的权限给用户,没有给权限的用户无法使用相应的服务,这里使用初始化用户posgres

CREATE USER MAPPING FOR postgres

SERVER admin_server

OPTIONS (user 'postgres', password 'xgit_123');

用户名 密码

7.在iot_all中创建外部表,映射iot_admin中的base_user;

CREATE FOREIGN TABLE "public"."base_user" (

"id" varchar(64) COLLATE "pg_catalog"."default" NOT NULL,

"username" varchar(255) COLLATE "pg_catalog"."default",

"password" varchar(255) COLLATE "pg_catalog"."default",

"name" varchar(255) COLLATE "pg_catalog"."default",

"birthday" varchar(255) COLLATE "pg_catalog"."default",

"address" varchar(255) COLLATE "pg_catalog"."default",

"mobile_phone" varchar(255) COLLATE "pg_catalog"."default",

"tel_phone" varchar(255) COLLATE "pg_catalog"."default",

"email" varchar(255) COLLATE "pg_catalog"."default",

"sex" varchar(1) COLLATE "pg_catalog"."default",

"status" varchar(1) COLLATE "pg_catalog"."default",

"description" varchar(255) COLLATE "pg_catalog"."default",

"crt_time" timestamp(6),

"crt_user" varchar(255) COLLATE "pg_catalog"."default",

"crt_name" varchar(255) COLLATE "pg_catalog"."default",

"crt_host" varchar(255) COLLATE "pg_catalog"."default",

"upd_time" timestamp(6),

"upd_user" varchar(255) COLLATE "pg_catalog"."default",

"upd_name" varchar(255) COLLATE "pg_catalog"."default",

"upd_host" varchar(255) COLLATE "pg_catalog"."default",

"attr1" varchar(255) COLLATE "pg_catalog"."default",

"attr2" varchar(255) COLLATE "pg_catalog"."default",

"attr3" varchar(255) COLLATE "pg_catalog"."default",

"attr4" varchar(255) COLLATE "pg_catalog"."default",

"attr5" varchar(255) COLLATE "pg_catalog"."default",

"attr6" varchar(255) COLLATE "pg_catalog"."default",

"attr7" varchar(255) COLLATE "pg_catalog"."default",

"attr8" varchar(255) COLLATE "pg_catalog"."default",

"delete_flag" int2 NOT NULL DEFAULT 0,

"user_type" int2 NOT NULL DEFAULT 0,

"office_id" varchar(64) COLLATE "pg_catalog"."default",

"company_id" varchar(64) COLLATE "pg_catalog"."default",

"is_frist_login" varchar(10) COLLATE "pg_catalog"."default"

) Server admin_server options (table_name 'base_user');

服务名 映射的表名称

6.验证同步

查看iot_admin中base_user的数据


查看iot_all中的base_user的数据


这里需要重点说明的一个问题是,外部表映射仅仅可以对表的增删改查进行操作,也就是对表数据进行操作,但是不能对表结构进行操作,也就是all里面字段的改变不影响admin的改变,同时ALL中的字段是可以少于admin中,但是不能多于admin中,或者存在admin中不存在的字段


使用Oracle_fdw实现跨库查询Oracle库

1.安装Oracle_fdw

官方地址:
http://pgxn.org/dist/oracle_fdw/ ,选择一个版本下载。

2.安装Oracle Instant Client

从oralce官网下载 'Basic' and 'SDK',假如下载后文件所在位置在/opt/oracle中。

cd /opt/oracle
unzip instantclient-basic-linux.x64-12.2.0.1.0.zip
unzip instantclient-sdk-linux.x64-12.2.0.1.0.zip
mv instantclient_12_2 instantclient
cd instantclient
ln -s libclntsh.so.12.1 libclntsh.so
vi /etc/profile
export ORACLE_HOME=/opt/oracle/instantclient
export OCI_LIB_DIR=$ORACLE_HOME
export OCI_INC_DIR=$ORACLE_HOME/sdk/include
source /etc/profile

3.启动用户变量

source /home/postgres/.bashrc

4.安装oracle_fdw

unzip oracle_fdw-1.5.0.zip 
cd oracle_fdw-1.5.0
make
make install

下面是创建FDW的扩展

同样是iot_all数据库

1.安装oracle_fdw扩展

create extension oracle_fdw;

2.创建server

create server oradb_test foreign data wrapper oracle_fdw options(dbserver '192.168.0.215:1521/ora_db');

这里和PG互相跨库查询略有不同

4.服务授权

grant usage on foreign server oradb_test to postgres;

5.创建服务映射给用户

create user mapping for postgres server oradb_test  options(user 'MG_APP',password 'QWERasdf');


下面进行表的创建和做映射,可以参照PG实现跨库,步骤相同。

结语

PG作为一款关系型数据库,可以实现如此多的功能扩展,可以是一款全栈型数据库也不为过。

相关推荐

0722-6.2.0-如何在RedHat7.2使用rpm安装CDH(无CM)

文档编写目的在前面的文档中,介绍了在有CM和无CM两种情况下使用rpm方式安装CDH5.10.0,本文档将介绍如何在无CM的情况下使用rpm方式安装CDH6.2.0,与之前安装C5进行对比。环境介绍:...

ARM64 平台基于 openEuler + iSula 环境部署 Kubernetes

为什么要在arm64平台上部署Kubernetes,而且还是鲲鹏920的架构。说来话长。。。此处省略5000字。介绍下系统信息;o架构:鲲鹏920(Kunpeng920)oOS:ope...

生产环境starrocks 3.1存算一体集群部署

集群规划FE:节点主要负责元数据管理、客户端连接管理、查询计划和查询调度。>3节点。BE:节点负责数据存储和SQL执行。>3节点。CN:无存储功能能的BE。环境准备CPU检查JDK...

在CentOS上添加swap虚拟内存并设置优先级

现如今很多云服务器都会自己配置好虚拟内存,当然也有很多没有配置虚拟内存的,虚拟内存可以让我们的低配服务器使用更多的内存,可以减少很多硬件成本,比如我们运行很多服务的时候,内存常常会满,当配置了虚拟内存...

国产深度(deepin)操作系统优化指南

1.升级内核随着deepin版本的更新,会自动升级系统内核,但是我们依旧可以通过命令行手动升级内核,以获取更好的性能和更多的硬件支持。具体操作:-添加PPAs使用以下命令添加PPAs:```...

postgresql-15.4 多节点主从(读写分离)

1、下载软件[root@TX-CN-PostgreSQL01-252software]#wgethttps://ftp.postgresql.org/pub/source/v15.4/postg...

Docker 容器 Java 服务内存与 GC 优化实施方案

一、设置Docker容器内存限制(生产环境建议)1.查看宿主机可用内存bashfree-h#示例输出(假设宿主机剩余16GB可用内存)#Mem:64G...

虚拟内存设置、解决linux内存不够问题

虚拟内存设置(解决linux内存不够情况)背景介绍  Memory指机器物理内存,读写速度低于CPU一个量级,但是高于磁盘不止一个量级。所以,程序和数据如果在内存的话,会有非常快的读写速度。但是,内存...

Elasticsearch性能调优(5):服务器配置选择

在选择elasticsearch服务器时,要尽可能地选择与当前业务量相匹配的服务器。如果服务器配置太低,则意味着需要更多的节点来满足需求,一个集群的节点太多时会增加集群管理的成本。如果服务器配置太高,...

Es如何落地

一、配置准备节点类型CPU内存硬盘网络机器数操作系统data节点16C64G2000G本地SSD所有es同一可用区3(ecs)Centos7master节点2C8G200G云SSD所有es同一可用区...

针对Linux内存管理知识学习总结

现在的服务器大部分都是运行在Linux上面的,所以,作为一个程序员有必要简单地了解一下系统是如何运行的。对于内存部分需要知道:地址映射内存管理的方式缺页异常先来看一些基本的知识,在进程看来,内存分为内...

MySQL进阶之性能优化

概述MySQL的性能优化,包括了服务器硬件优化、操作系统的优化、MySQL数据库配置优化、数据库表设计的优化、SQL语句优化等5个方面的优化。在进行优化之前,需要先掌握性能分析的思路和方法,找出问题,...

Linux Cgroups(Control Groups)原理

LinuxCgroups(ControlGroups)是内核提供的资源分配、限制和监控机制,通过层级化进程分组实现资源的精细化控制。以下从核心原理、操作示例和版本演进三方面详细分析:一、核心原理与...

linux 常用性能优化参数及理解

1.优化内核相关参数配置文件/etc/sysctl.conf配置方法直接将参数添加进文件每条一行.sysctl-a可以查看默认配置sysctl-p执行并检测是否有错误例如设置错了参数:[roo...

如何在 Linux 中使用 Sysctl 命令?

sysctl是一个用于配置和查询Linux内核参数的命令行工具。它通过与/proc/sys虚拟文件系统交互,允许用户在运行时动态修改内核参数。这些参数控制着系统的各种行为,包括网络设置、文件...

取消回复欢迎 发表评论: