Wyeksportuj określone wiersze z tabeli PostgreSQL jako skrypt SQL INSERT

Mam schemat bazy danych o nazwie: nyummyi tabelę o nazwie cimory:

create table nyummy.cimory (
  id numeric(10,0) not null,
  name character varying(60) not null,
  city character varying(50) not null,
  CONSTRAINT cimory_pkey PRIMARY KEY (id)
);

Chcę wyeksportować dane cimorytabeli jako wstawianie pliku skryptu SQL. Chcę jednak eksportować rekordy / dane tylko wtedy, gdy miasto jest równe „tokyo” (zakładając, że wszystkie dane miasta są pisane małymi literami).

Jak to zrobić?

Nie ma znaczenia, czy rozwiązanie jest dostępne w darmowych narzędziach GUI, czy w wierszu poleceń (chociaż rozwiązanie narzędzi GUI jest lepsze). Próbowałem pgAdmin III, ale nie mogę znaleźć opcji, aby to zrobić.

Utwórz tabelę z zestawem, który chcesz wyeksportować, a następnie użyj narzędzia wiersza polecenia pg_dump, aby wyeksportować do pliku:

create table export_table as 
select id, name, city
from nyummy.cimory
where city = 'tokyo'

$ pg_dump --table=export_table --data-only --column-inserts my_database > data.sql

--column-inserts zrzuci jako polecenia wstawiania z nazwami kolumn.

--data-only nie zrzucaj schematu.

Jak skomentowano poniżej, utworzenie widoku zamiast tabeli pozwoli na uniknięcie tworzenia tabeli, ilekroć konieczny jest nowy eksport.

Przez eksport danych tylko do użytku COPY.
Otrzymujesz plik z jednym wierszem tabeli w wierszu jako zwykły tekst (nie INSERTpolecenia), jest mniejszy i szybszy:

COPY (SELECT * FROM nyummy.cimory WHERE city = 'tokio') TO '/path/to/file.csv';

Zaimportuj to samo do innej tabeli o tej samej strukturze w dowolnym miejscu za pomocą:

COPY other_tbl FROM '/path/to/file.csv';

COPYzapisuje i odczytuje pliki lokalne na serwerze , w przeciwieństwie do programów klienckich takich jak pg_dumplub, psqlktóre odczytują i zapisują pliki lokalne na kliencie . Jeśli oba działają na tym samym komputerze, nie ma to większego znaczenia, ale dotyczy zdalnych połączeń.

Istnieje również \copypolecenie psql, które:

Wykonuje kopię nakładki (klienta). Jest to operacja, która uruchamia COPYpolecenie SQL , ale zamiast serwera odczytującego lub zapisującego określony plik, psql czyta lub zapisuje plik i kieruje dane między serwerem a lokalnym systemem plików. Oznacza to, że dostęp do plików i uprawnienia należą do lokalnego użytkownika, a nie do serwera, i nie są wymagane żadne uprawnienia administratora SQL.

Jest to łatwy i szybki sposób ręcznego eksportowania tabeli do skryptu za pomocą pgAdmin bez dodatkowych instalacji :

1. Kliknij prawym przyciskiem myszy tabelę docelową i wybierz „Kopia zapasowa”.
2. Wybierz ścieżkę pliku do zapisania kopii zapasowej. Jako Format wybierz „Zwykły”.
3. Otwórz zakładkę „Opcje zrzutu 2” u dołu i zaznacz „Użyj wstawek kolumn”.
4. Kliknij przycisk Kopia zapasowa.
5. Jeśli otworzysz plik wynikowy za pomocą czytnika tekstu (np. Notepad ++), otrzymasz skrypt do utworzenia całej tabeli. Stamtąd możesz po prostu skopiować wygenerowane instrukcje INSERT.

Ta metoda działa również z techniką tworzenia tabeli eksportu, jak pokazano w odpowiedzi @Clodoaldo Neto.

SQL Workbench ma taką funkcję.

Po uruchomieniu zapytania kliknij prawym przyciskiem myszy wyniki zapytania i wybierz „Kopiuj dane jako SQL> Wstaw SQL”

W moim przypadku użycia byłem w stanie po prostu potokować do grep.

pg_dump -U user_name --data-only --column-inserts -t nyummy.cimory | grep "tokyo" > tokyo.sql

Próbowałem napisać procedurę w ten sposób, opartą na kodach @PhilHibbs, w inny sposób. Proszę spojrzeć i przetestować.

 CREATE OR REPLACE FUNCTION dump(IN p_schema text, IN p_table text, IN p_where text)
   RETURNS setof text AS
 $BODY$
 DECLARE
     dumpquery_0 text;
     dumpquery_1 text;
     selquery text;
     selvalue text;
     valrec record;
     colrec record;
 BEGIN

     -- ------ --
     -- GLOBAL --
     --   build base INSERT
     --   build SELECT array[ ... ]
     dumpquery_0 := 'INSERT INTO ' ||  quote_ident(p_schema) || '.' || quote_ident(p_table) || '(';
     selquery    := 'SELECT array[';

     <<label0>>
     FOR colrec IN SELECT table_schema, table_name, column_name, data_type
                   FROM information_schema.columns
                   WHERE table_name = p_table and table_schema = p_schema
                   ORDER BY ordinal_position
     LOOP
         dumpquery_0 := dumpquery_0 || quote_ident(colrec.column_name) || ',';
         selquery    := selquery    || 'CAST(' || quote_ident(colrec.column_name) || ' AS TEXT),';
     END LOOP label0;

     dumpquery_0 := substring(dumpquery_0 ,1,length(dumpquery_0)-1) || ')';
     dumpquery_0 := dumpquery_0 || ' VALUES (';
     selquery    := substring(selquery    ,1,length(selquery)-1)    || '] AS MYARRAY';
     selquery    := selquery    || ' FROM ' ||quote_ident(p_schema)||'.'||quote_ident(p_table);
     selquery    := selquery    || ' WHERE '||p_where;
     -- GLOBAL --
     -- ------ --

     -- ----------- --
     -- SELECT LOOP --
     --   execute SELECT built and loop on each row
     <<label1>>
     FOR valrec IN  EXECUTE  selquery
     LOOP
         dumpquery_1 := '';
         IF not found THEN
             EXIT ;
         END IF;

         -- ----------- --
         -- LOOP ARRAY (EACH FIELDS) --
         <<label2>>
         FOREACH selvalue in ARRAY valrec.MYARRAY
         LOOP
             IF selvalue IS NULL
             THEN selvalue := 'NULL';
             ELSE selvalue := quote_literal(selvalue);
             END IF;
             dumpquery_1 := dumpquery_1 || selvalue || ',';
         END LOOP label2;
         dumpquery_1 := substring(dumpquery_1 ,1,length(dumpquery_1)-1) || ');';
         -- LOOP ARRAY (EACH FIELD) --
         -- ----------- --

         -- debug: RETURN NEXT dumpquery_0 || dumpquery_1 || ' --' || selquery;
         -- debug: RETURN NEXT selquery;
         RETURN NEXT dumpquery_0 || dumpquery_1;

     END LOOP label1 ;
     -- SELECT LOOP --
     -- ----------- --

 RETURN ;
 END
 $BODY$
   LANGUAGE plpgsql VOLATILE;

I wtedy :

-- for a range
SELECT dump('public', 'my_table','my_id between 123456 and 123459'); 
-- for the entire table
SELECT dump('public', 'my_table','true');

testowany na moim postgresie 9.1, z tabelą z mieszanym typem pola danych (tekst, double, int, znacznik czasu bez strefy czasowej itp.).

Dlatego potrzebny jest CAST w typie TEXT. Mój test działa poprawnie dla około 9 milionów linii, wygląda na to, że zawiedzie tuż przed 18 minutami pracy.

ps: Znalazłem odpowiednik mysql w sieci.

Możesz zrobić widok tabeli z określonymi rekordami, a następnie zrzucić plik sql

CREATE VIEW foo AS
SELECT id,name,city FROM nyummy.cimory WHERE city = 'tokyo'

Właśnie podjąłem szybką procedurę, aby to zrobić. Działa tylko dla jednego wiersza, dlatego tworzę widok tymczasowy, który po prostu wybiera wiersz, który chcę, a następnie zastępuję pg_temp.temp_view rzeczywistą tabelą, do której chcę wstawić.

CREATE OR REPLACE FUNCTION dv_util.gen_insert_statement(IN p_schema text, IN p_table text)
  RETURNS text AS
$BODY$
DECLARE
    selquery text; 
    valquery text; 
    selvalue text; 
    colvalue text; 
    colrec record;
BEGIN

    selquery := 'INSERT INTO ' ||  quote_ident(p_schema) || '.' || quote_ident(p_table);

    selquery := selquery || '(';

    valquery := ' VALUES (';
    FOR colrec IN SELECT table_schema, table_name, column_name, data_type
                  FROM information_schema.columns 
                  WHERE table_name = p_table and table_schema = p_schema 
                  ORDER BY ordinal_position 
    LOOP
      selquery := selquery || quote_ident(colrec.column_name) || ',';

      selvalue := 
        'SELECT CASE WHEN ' || quote_ident(colrec.column_name) || ' IS NULL' || 
                   ' THEN ''NULL''' || 
                   ' ELSE '''' || quote_literal('|| quote_ident(colrec.column_name) || ')::text || ''''' || 
                   ' END' || 
        ' FROM '||quote_ident(p_schema)||'.'||quote_ident(p_table);
      EXECUTE selvalue INTO colvalue;
      valquery := valquery || colvalue || ',';
    END LOOP;
    -- Replace the last , with a )
    selquery := substring(selquery,1,length(selquery)-1) || ')';
    valquery := substring(valquery,1,length(valquery)-1) || ')';

    selquery := selquery || valquery;

RETURN selquery;
END
$BODY$
  LANGUAGE plpgsql VOLATILE;

Wywołano w ten sposób:

SELECT distinct dv_util.gen_insert_statement('pg_temp_' || sess_id::text,'my_data') 
from pg_stat_activity 
where procpid = pg_backend_pid()

Nie testowałem tego pod kątem ataków z iniekcją, daj mi znać, jeśli wywołanie quote_literal nie jest wystarczające.

Działa to również tylko w przypadku kolumn, które można po prostu rzutować na :: text iz powrotem.

Dotyczy to również Greenplum, ale nie mogę wymyślić powodu, dla którego nie działałoby to na Postgres, CMIIW.

próbowałem w pgadmin wykonywania zapytania z " EXECUTE QUERY WRITE RESULT TO FILE " opcją

to tylko eksport danych, w przeciwnym razie spróbuj

pg_dump -t view_name DB_name > db.sql

-t opcja używana dla ==> Zrzuć tylko tabele (lub widoki lub sekwencje) pasujące do tabeli, patrz