怎么理解PostgreSQL12 COPY和bulkloading有什么特性

本篇內容主要講解“怎么理解PostgreSQL12 COPY和bulkloading有什么特性”，感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷，實用性強。下面就讓小編來帶大家學習“怎么理解PostgreSQL12 COPY和bulkloading有什么特性”吧!

業務是否依賴COPY命令加載數據？PostgreSQL12提供了一個新特性，大大加快了加載速度。

COPY：Loading and unloading data as fast as possible

細看PostgreSQL12的COPY語法，發現有兩處變動：

1）\h 會有手冊文檔鏈接

2）COPY支持WHERE條件

下面是完整語法：

db12=# \h COPY
Command:     COPY
Description: copy data between a file and a table
Syntax:
COPY table_name [ ( column_name [, ...] ) ]
    FROM { 'filename' | PROGRAM 'command' | STDIN }
    [ [ WITH ] ( option [, ...] ) ]
    [ WHERE condition ]
COPY { table_name [ ( column_name [, ...] ) ] | ( query ) }
    TO { 'filename' | PROGRAM 'command' | STDOUT }
    [ [ WITH ] ( option [, ...] ) ]
where option can be one of:
    FORMAT format_name
    FREEZE [ boolean ]
    DELIMITER 'delimiter_character'
    NULL 'null_string'
    HEADER [ boolean ]
    QUOTE 'quote_character'
    ESCAPE 'escape_character'
    FORCE_QUOTE { ( column_name [, ...] ) | * }
    FORCE_NOT_NULL ( column_name [, ...] )
    FORCE_NULL ( column_name [, ...] )
    ENCODING 'encoding_name'
URL: https://www.postgresql.org/docs/12/sql-copy.html

雖然添加文檔鏈接功能帶來便利，但是WHERE過濾功能更加有用。這個功能的目的是什么？當前，COPY只能導入整個文件。但是某些場景下會有問題：很多場景下，人們只想加載數據的一個子集，并且在導出前必須編寫大量代碼進行過濾。

COPY...WHERE: 導入時過濾

PostgreSQL通過該條件可以輕松地進行過濾。下面講述一個簡單的例子：

db12=# CREATE TABLE t_demo AS
        SELECT * FROM generate_series(1, 1000) AS id;
SELECT 1000

首先先插入1000行數據，然后導出到一個文件：

db12=# COPY t_demo TO '/tmp/file.txt';
COPY 1000

最后，再重新導入數據：

db12=# CREATE TABLE t_import (x int);
CREATE TABLE
db12=# COPY t_import FROM '/tmp/file.txt' WHERE x < 5;
COPY 4
db12=# SELECT * FROM t_import;
 x
---
 1
 2
 3
 4
(4 rows)

如上說是，過濾數據非常簡單直接。需要注意，導出列是“id”，導入列是“x”。文件文件不知道導入表的表結構---需要確保過濾導入表的列名。

其他特性

COPY可以將數據發送到UNIX pipe，還可以從pipe中讀取數據。如下所示：

db12=# COPY t_demo TO PROGRAM 'gzip -c > /tmp/file.txt.gz';
COPY 1000
db12=# COPY t_import FROM PROGRAM 'gunzip -c /tmp/file.txt.gz'
    WHERE x BETWEEN 100 AND 103;
COPY 4
db12=# SELECT * FROM t_import WHERE x >= 100;
  x  
-----
 100
 101
 102
 103
(4 rows)

某些場景下，不止想將數據導出。上面場景，我們想導出數據時將數據壓縮；導入時將數據解壓并過濾。如上所示，這種方法非常簡單。

到此，相信大家對“怎么理解PostgreSQL12 COPY和bulkloading有什么特性”有了更深的了解，不妨來實際操作一番吧！這里是億速云網站，更多相關內容可以進入相關頻道進行查詢，關注我們，繼續學習！