2. 程式人生 > >pgsql的copy函式

pgsql的copy函式

阿新 • • 發佈：2019-01-06

用pgsql的copy函式將檔案匯入表中：

COPY 命令可以快速的匯入資料到postgresql資料庫中，檔案格式類似TXT、CVS之類。適合批量匯入資料，速度比較快。注意COPY只能用於表，不能用於檢視。

COPY 命令裡面的檔案必須是由伺服器直接讀或寫的檔案，而不是由客戶端應用讀寫。因此，它們必須位於資料庫伺服器上或者可以為資料庫伺服器所訪問，而不是由客戶端做這些事情。它們必須是PostgresqlSQL使用者（伺服器執行的使用者 ID）可以訪問到並且可讀或者可寫，而不是客戶端。 COPY 到一個命名檔案是隻允許資料庫超級使用者進行的，因為它允許讀寫任意伺服器有許可權訪問的檔案。

匯入檔案或者 STDIN到表中

匯出表資料到檔案或 STDOUT

copy命令可以操作的檔案型別有：txt、sql、csv、壓縮檔案、二進位制格式

1、 copy命令匯入資料示例：tb2是表名,delimiter ',' 表示按逗號分隔欄位資料

1

2

3

4

5

6

7

postgresql=# copy tb2 from '/mnt/postgresql/weibo.1000'delimiter ',';

COPY1000

postgresql=# select count(*)from tb2;

 

count

-------

  1000

(1 row)

2、 copy命令匯入匯出資料為sql格式

1

2

3

4

postgresql=# COPY tb2 TO '/mnt/postgresql/weibo.sql';

COPY1000

postgresql=#  COPY tb2 from '/mnt/postgresql/weibo.sql';

COPY2000

3、 copy命令匯出指定欄位資料在控制檯

1

2

3

4

5

6

7

8

9

10

11

12

postgresql=# COPY tb2 (t1,t2,t3) TO STDOUT;

21317568596      1270505818

21317568149      2302617224

21317568470      1297983318

21317568110      2069993004 2302781822

21317568354      362106137 

21317568308      1450475836

21317568584      83103917   

21317568208      1844532765 1713926427

21317568603      1227221083 2478474742

21317568151      1430992492 1253397461

21317567390      1037539510

4、copy命令匯入匯出資料為csv格式

1

2

3

4

postgresql=# COPY  tb2 (t1,t2,t3) TO '/mnt/postgresql/weibo.csv' CSV HEADER;

COPY2000

postgresql=#  COPY tb2 from '/mnt/postgresql/weibo1.csv';

COPY2000

5、 copy命令匯入匯出資料為txt格式

 

1

2

3

4

postgresql=#   COPY tb2 TO '/mnt/postgresql/weibo.txt';

COPY2000

postgresql=#  COPY tb2 from '/mnt/postgresql/weibo.txt';

COPY2000

6、 copy命令匯出資料為壓縮檔案

1

2

postgresql=# COPY tb2 TOPROGRAM 'gzip >/mnt/postgresql/weibo.1000.gz';

COPY2000

7、 copy命令匯入匯出檔案為二進位制

用copyto命令以二進位制形式把tb2表的內容拷貝到binary檔案中

1

2

postgresql=# copy binary tb2 to'/mnt/postgresql/binary';

COPY 8000

用copyfrom命令把binary檔案中的資料拷貝到表從tb2中

1

2

postgresql=# copy binary tb2 from'/mnt/postgresql/binary';

COPY 8000

7、將excel表中的資料匯入到Postgresql資料庫的某張表中。

步驟：

1.將excel表格欄位，按照postgresql資料庫中表的欄位順序來整理資料，並儲存為csv檔案。

2.用記事本開啟csv檔案，另存為UTF-8格式。

3.使用客戶端連結postgresql資料庫，執行如下指令碼，匯入csv檔案到Postgresql資料表：

1

copy testdatafrom 'd:/test/testdata.csv' delimiter as',' csv quote as '"'

  注：testdata是postgresql資料庫表的名稱。

注意事項：

1.test目錄需要賦予postgresql使用者可讀寫的許可權，否則會有如下報錯資訊：

1

ERROR: could not open file "d:/testdata2.csv" forwriting:Permission denied

2.csv檔案要為utf-8格式，否則匯入時可能會有報錯：

1

ERROR:invalid bytesequence for encoding "UTF8": 0xcdf5

相關推薦

c理解提高（5）字串copy函式技術推演

#include <stdlib.h> #include <string.h> #include <stdio.h> void main01() { //通過棧的方式對資料進行拷貝 char a[] = "i am a student"; char b[6

c理解提高（3）程式的記憶體四區模型和函式呼叫模型

程式的記憶體四區模型 記憶體四區的建立流程 流程說明 1、作業系統把物理硬碟程式碼load到記憶體 2、作業系統把c程式碼分成四個區 3、作業系統找到main函式入口執行   各區元素分析 函式呼叫模型 基本原理

yolo v2 損失函式原始碼解讀

前提說明：     1, 關於 yolo 和 yolo v2 的詳細解釋請移步至如下兩個連結，或者直接看論文（我自己有想寫 yolo 的教程，但思前想後下面兩個連結中的文章質量實在是太好了_(:з」∠)_）         yo

SQL Server 字串函式

　在開發T-SQL時，經常會需要對字串進行各種各樣的操作，下面介紹常用的字串函式。 1、獲取字元的ASCII碼 ASCII 　　　　ASCII碼是對字元的標準編碼。要獲取字元的ASCII碼就可以通過呼叫ASCII函式來實現。 　　　　語法結構： ASCII(espression)   這裡的e

python中偏函式的應用

一、什麼是偏函式？ （1）在Python的functools模組眾多的功能中，其中有一個就是偏函式，我們稱之為 partial function 模組的概念我們下一篇在細講。 （2）我們都聽過偏將軍吧，在三國時代的官制中，系將軍的輔佐，與裨將軍兩者都

C/C++程式設計教訓----函式內靜態類物件初始化非執行緒安全（C++11之前）

不少程式設計師在編寫程式的時候，會使用函式內靜態(static)變數，既能滿足函式內這個變數可以持久的記錄某些資訊，又使其訪問範圍的控制侷限於函式內。但函式內靜態類物件初始化是非執行緒安全的。 問題背景 在我們產品中對log4cxx做了一些簡單的封裝 （採用VS2005編譯），其中會

Python2.7 Print函式

Print函式的各種用法 一、基礎用法 1.print語句可以向螢幕上輸出指定的文字。 例如： print 'Hello World!' 2.print語句也可以跟上多個字串，用逗號“,”隔開，就可以連成一串輸出： ps：print會依次列印每個字串，遇到逗號“,”會

Linux串列埠程式設計詳解 linux串列埠相關設定函式

tcgetattr    函式用於獲取與終端相關的引數。引數fd為終端的檔案描述符，返回的結果儲存在termios 結構體中 http://baike.baidu.com/view/5644808.htm?fr=aladdin tcset

redis 有序集合(zset)函式

redis 有序集合(zset)函式   zAdd 命令/方法/函式 Adds the specified member with a given score to the sorted set stored at key. 增加一個或多個元素，如果該元素已經存在，更新它的socre值

C語言 trim函式實現

#include <stdio.h> #include <stdlib.h> #include <string.h> #include <ctype.h> //去除尾部空格 char *rtrim(char *str) { if(str == N

Postgres中視窗函式lag以lead

sql中我們經常會用到聚合函式，聚合之後它會減少資料量，但是如果我們想把聚合之後的資料和原始資料同時展示出來，那麼我們需要用到視窗函式。 lag視窗函式通過條件把資料劃分成子類，在子類中進行排序 視窗函式的通用寫法 select name ,orderdate, cost, su

分享幾個Python小技巧函式裡的4個小花招

前面講了很多內容都是關於python的變數，資料結構，下面我們來談一談python的函式。python裡的函式知識點大概分為基礎的定義使用，作用域和引數傳遞，高階用法，其中引數傳遞最為靈活，作用域最為繞人. 函式其實是對程式邏輯進行結構化或者過程化的一種程式設計方法,把整塊的程式碼巧妙的隔離成易於管理的小塊

Python小白學習之路（十）—【函式】【函式返回值】【函式引數】

寫在前面： 昨天早睡之後，感覺今天已經恢復了百分之八十的樣子 又是活力滿滿的小夥郭 今日份雞湯： 我始終相信，在這個世界上，一定有另一個自己，在做著我不敢做的事，在過著我想過的生活。-------宮崎駿 函式 一、函數出現的背景 在學習函式之前，一直遵循：面向過程程式設計，即：根據業務邏輯從上到

pow函式的精確度

水仙花數N屬於[3,6] #include <stdio.h> #include <math.h> int main(void) { int n; int i,j,num; double sum; //用來儲存沒一位數的值 //int sum；

解構函式為什麼不能宣告為虛擬函式？解構函式為什麼要宣告為虛擬函式

多型中的虛擬函式表是在執行時建立的還是編譯時建立的？ 答：虛擬函式表在編譯的時候就確定了，而類物件的虛擬函式指標vptr是在執行階段確定的，這是實現多型的關鍵 （類的函式的呼叫並不是在編譯時就確定的，而是在執行時才確定的，由於編寫程式碼的時候並不能確定被呼叫的是基類的函式還是哪個派生類的函式，所以宣告為虛

JavaScript中的高階函式

之前寫的《JavaScript學習手冊》，客戶跟我說有些內容不適合初學者，讓我刪了，感覺挺可惜的，拿到這裡和大家分享。 JavaScript中的一切都是物件，這句話同樣適用於函式。函式物件可以作為函式的引數。 一 函式物件作為另一個函式的引數 函式可以作為另外一個函式的引數，這裡的“另外一個函式”可以返

活用clone和trigger函式，點選按鈕原有事件不觸發，之後再觸發原有事件

活用clone和trigger函式，點選按鈕原有事件不觸發，之後再觸發原有事件 需求： 網站開發完畢了，然後產品說要在原來的’確認按鈕’點選後加一個’彈窗’提醒使用者一些注意事項，在使用者點選彈窗裡面的’同意按鈕’後再執行原來’確認按鈕’ 裡面繫結的事件。需求看起來很簡單，但是有一個要

python3-實現atoi()函式

0.摘要 本文介紹c語言中的atoi函式功能，並使用python3實現。   1.atoi()函式 atoi (表示 ascii to integer)是把字串轉換成整型數的一個函式。 函式定義形式：int atoi(const char *nptr)； 函式會掃描

Python學習(007)-函式的特性

一、.函式是什麼 定義: 函式是指將一組語句的集合通過一個名字(函式名)封裝起來，要想執行這個函式，只需呼叫其函式名即可 特性: 1.程式碼重用 2.保持一致性 3.可擴充套件性 二、建立 2.1格式 1 def 函式名（引數列表）: 2 函式體 2.2命名規則 函

Python內建進位制轉換函式(實現16進位制和ASCII轉換)

在進行wireshark抓包時你會發現底端視窗報文內容左邊是十六進位制數字，右邊是每兩個十六進位制轉換的ASCII字元，這裡使用Python程式碼實現一個十六進位制和ASCII的轉換方法。 hex() 轉換一個整數物件為十六進位制的字串 >>> hex(16) '0x10' >&