1 Temat przez pietro54

  • pietro54
  • +
  • Nieaktywny
  • Zarejestrowany: 2012-12-05
  • Posty: 18

Temat: Export/Import z wykorzystaniem wielu rdzeni. Pg 9.2

Witam,
Czy istnieje szansa aby wykorzystać więcej niż jeden rdzeń podczas exportu i importu baz?
Dysponuję mocną maszyną wyposażoną w 24rdzenie i 4dyski ssd w raidzie 10.
Podczas normalnej pracy widzę że są wykorzystywane różne rdzenie, natomiast podczas wyżej wspomnianych operacji używany jest tylko jeden rdzeń.
Przez co zrzut bazy liczącej ponad 90gb jest operacją która długo trwa.
Z tego co widziałem odczyt na dysku jest w granicach 30mb/s. (czyli dyski się nudzą)

Czy istnieje jakiś przełącznik, skrypt który pozwolił by robić import, export wykorzystując więcej niż jeden rdzeń?

2 Odpowiedź przez c_michal

  • c_michal
  • *****
  • Nieaktywny
  • Zarejestrowany: 2009-01-28
  • Posty: 319

Odp: Export/Import z wykorzystaniem wielu rdzeni. Pg 9.2

3 Odpowiedź przez pietro54

  • pietro54
  • +
  • Nieaktywny
  • Zarejestrowany: 2012-12-05
  • Posty: 18

Odp: Export/Import z wykorzystaniem wielu rdzeni. Pg 9.2

Dzięki za odpowiedz. Szukałem takiej informacji już od pół roku. Dzięki jeszcze raz, czekam na 9.3!

4 Odpowiedź przez depesz

  • depesz
  • **
  • Nieaktywny
  • Zarejestrowany: 2013-04-09
  • Posty: 101

Odp: Export/Import z wykorzystaniem wielu rdzeni. Pg 9.2

--
The best thing about modern society is how easy it is to avoid contact with it.

depesz's Strona

5 Odpowiedź przez pietro54

  • pietro54
  • +
  • Nieaktywny
  • Zarejestrowany: 2012-12-05
  • Posty: 18

Odp: Export/Import z wykorzystaniem wielu rdzeni. Pg 9.2

Dzięki wielkie, czegoś takiego szukałem.

6 Odpowiedź przez pietro54

  • pietro54
  • +
  • Nieaktywny
  • Zarejestrowany: 2012-12-05
  • Posty: 18

Odp: Export/Import z wykorzystaniem wielu rdzeni. Pg 9.2

Cześć,
nie chcę zakładać nowego wątku więc odgrzeję starego ale przydatnego kotleta.

Pytanie brzmi czy w pg_dump z opcją -fd da się użyć innej kompresji niż gzip?

Obecnie wykorzystuje:
pg_dump -Fd baza -j 12 -f baza_katalog -Z 9

a fajnie było by wykorzystać coś takiego
pg_dump baza -j 12 -Fd | /usr/local/bin/lbzip2 -n 12 -9 > baza

Chodzi o to aby wykorzystać lbzipa który ma znacznie lepsze algorytmy koompresji a do tego odciążył by sam proces pg dump rozrzucając obciążenie po różnych rdzeniach maszyny.

Problem polega na tym że nie mogę odpowiedio przekierować strumienia, bo pg_dump upiera się aby źródłem wyjściowym był katalog.

Może coś podpowiecie?