Projekt

Allgemein

Profil

710 Datenbankeinstellungen und Tuning (postgresql conf) » Historie » Version 72

[X] Richard H, 24.04.2019 17:23

1 42 [X] Daniel S
h1. postgresql.conf: Datenbankeinstellungen und Tuning
2 1 [X] Daniel S
3 26 [S] Philipp K
4 23 [E] Oleg G
@postgresql.conf@ ([[PostgreSQL Netzwerkkonfiguration (pg_hba.conf)]])
5 1 [X] Daniel S
6 56 [S] Dominik G
Datei-Pfad: *..\PostgreSQL\9.6\data\pg96\postgresql.conf*
7 25 [E] Oleg G
8 58 [S] Philipp K
h2. Prüfen der wichtigsten Postgreseinstellungen mittels Datenbankfunktion
9
10 65 [E] Frank S
Die Funktionen heißen @TSystem.database_settings__initialize()@ und @TSystem.database_settings__validate()@ und muss bei Neuerungen entsprechend angepasst oder erweitert werden.
11 54 [S] Philipp K
12 1 [X] Daniel S
h2. Konfiguration PostgreSQL (Beachte Betriebssystem) ab Version 9.3 
13 54 [S] Philipp K
14 51 [X] Daniel S
Beachte Programm-Start-Prüfung PRODAT: #9933
15 60 [S] Philipp K
Für ein 16GB RAM System
16 1 [X] Daniel S
17 69 [X] Richard H
|_.° |_. param                |_. value    |_. Bemerkung |
18
|   | shared_buffers         | 4096MB     | Daumenregel: ca 1/4 Des RAMs den Rest für effective_cache_size |
19
|   | temp_buffers           | 8MB        ||
20
|   | work_mem | 32MB| nicht zu hoch, da je sort bzw. hash Operation, auch mehrfach bei komplexen queries » https://www.citusdata.com/blog/2018/06/12/configuring-work-mem-on-postgres/ |
21
|   | maintenance_work_mem       | 512MB | für VACUUM, CREATE INDEX, and ALTER TABLE ADD FOREIGN KEY, außerdem für restore dumps |
22
|   | dynamic_shared_memory_type | windows ||
23
|   | max_worker_processes | 8 | Default ist 8 (keine Änderung nötig). Je nach Unternehmensgröße mehr |
24
| ° | max_parallel_workers_per_gather | 4 ||
25
|   | fsync| off ||
26
|   | synchronous_commit| off ||
27
|   | wal_compression| on || 
28
|   | wal_buffers| -1 |   (bis 9.3 8MB) |
29
|   | max_wal_size| 3GB |     (ab 9.6 Ersatz für checkpoint_segments3 * checkpoint_segments) * 16MB )|
30 72 [X] Richard H
| ° | max_locks_per_transaction | 1024 | https://redmine.prodat-sql.de/issues/12311 |
31 69 [X] Richard H
|   | effective_cache_size | 12288MB | Beachte, wenn Server nur für PRODAT dann 3/4 des Arbeitsspeichers, wenn auch andere Programme dort laufen dann 1/2 Arbeitsspeicher. Gibt an wieviel RAM-Cache Postgressql erwarten kann, für Indizies usw |
32
|   | default_statistics_target | 1000 ||
33
| ° | seq_page_cost | 2.0 | Mache sequentielle Scans "teurer": Der Planer ist eher geneigt, den Index zu nutzen |
34 70 [X] Richard H
| ° | random_page_const | 4.0 | ssds vs hdds |
35 69 [X] Richard H
| ° | cursor_tuple_fraction | 0.75 | (siehe #6436) (Steuert, dass das CURSOR-FETCH (F2-Fenster) anders errechnet wird und es Blöcke früher zurückgibt) |
36
|   | log_destination | 'eventlog' | (unter Windows) |
37
|   | log_checkpoints | off | auf Default setzen |
38
|   | log_line_prefix | '<%u@@@%d-%t> ' ||
39
| ° | log_autovacuum_min_duration | 250ms | # default -1@ (auf Default setzen) > alles was länger 250ms dauert loggen und bei Gelegnheit prüfen|
40
|   | search_path | '"$user",public,TSystem,prodat_languages,Z_99_Deprecated' ||
41
|   | datestyle | 'iso, dmy' ||
42
|   | standard_conforming_strings | off | siehe #4860 |
43
|   | lc_messages | 'en_US.UTF-8' | (Das muß sein, da wir die Fehlermeldungen teilweise parsen und somit auf die Fehler-Strings gehen.) |
44
|   | lc_monetary | 'German_Germany.1252' | (Lokale je nach Land) |
45
|   | lc_numeric | 'German_Germany.1252' | |
46
|   | lc_time | 'German_Germany.1252' | |
47 56 [S] Dominik G
48
{{collapse(Alte Versionen:)
49 1 [X] Daniel S
@checkpoint_segments = 64 # in 9.6 nicht supported@
50 66 [E] Frank S
° @statement_timeout = 120000@ Bis Prodat 11.5.3@ wird clientseitig im Prodat gesetzt (480000 und für AppServer/Admins 1200000)
51 49 [S] Philipp K
}}
52 66 [E] Frank S
53 67 [E] Frank S
!!! ° = *Für einige Werte gibt es Vorgaben und Prüfungen, in den Client-Sessions.*
54 66 [E] Frank S
!!! siehe @TSystem.database_settings__initialize@ und @TSystem.database_settings__validate@ (PSQL\0050 System\010 Functions TSystem.sql)
55 1 [X] Daniel S
56 57 [S] Dominik G
h2. Reload
57
58
Konfiguration im laufenden Betrieb neu laden.
59
@..\PostgreSQL\pg96\bin\pg_ctl reload -D ..\PostgreSQL\data\pg96@
60
61 34 [X] Daniel S
62
h2. Linux 
63
64
{{collapse(Linux)
65
66
h3. Betriebssystem - Speichereinstellungen mind. 3GiB Arbeitsspeicher!
67
68
* standard:
69
sysctl kernel.shmmax
70
kernel.shmmax = 33554432
71
72
* umsetzen auf 280437720 (256MB, Mindestens, LOLL steht auf 1024MB (8GB Ram)) (On Windows the useful range is 64MB to 512MB)
73
/etc/sysctl.conf  -> zeile aufnehmen: kernel.shmmax=280437720
74
reboot
75
76
h3. Nur auf Systemen mit 3GiB+ RAM anzuwenden
77
78
@$ free -m@
79
<pre>
80
             total       used       free     shared    buffers     cached
81
Mem:          3018       1516       1501          0        208       1113
82
-/+ buffers/cache:        194       2823
83
Swap:         1023          0       1023
84
</pre>
85
86
87
h3. Weiteres
88
89
Unter Linux ist noch die shmmax-Option aus der 99-postgresql.conf via sysctl zu setzen, sonst klappert das da.
90
http://www.postgresql.org/docs/8.2/static/kernel-resources.html
91
92
}}
93 1 [X] Daniel S
94 19 [S] Dominik G
95 14 [S] Dominik G
Könnte durchaus noch weiter getrieben werden, indem man Sie auf die Prodat-DB abstimmt:
96 13 [S] Dominik G
* http://wiki.postgresql.org/wiki/Tuning_Your_PostgreSQL_Server
97 11 [X] Daniel S
* http://www.postgresql.org/docs/current/static/performance-tips.html
98 13 [S] Dominik G
* "five_steps_perform_2009.pdf":http://www.prodat-sql.de/redmine/attachments/download/2528/five_steps_perform_2009.pdf Dokument über Einstellungen etc
99
100 19 [S] Dominik G
101
*Hinweis:* Fehler im PgAdmin/Server-Status: ungültige Byte-Sequenz für Kodierung "UTF8" ... durch SELECT pg_file_read('pg_log/... kann ignoriert werden, da wir ja ins eventlog schreiben.
102
Die Anzeige vom Log hier einfach schließen. Liegt an LC_MESSAGES und mehrsprachigen Systemen, vermutlich ein Bug, Workaround LC_MESSAGES='C' (evtl. nicht mit Prodat kompatibel)
103 11 [X] Daniel S
104 12 [X] Daniel S
105 13 [S] Dominik G
h2. Virtualisierung
106 12 [X] Daniel S
107 13 [S] Dominik G
"Database_Virtualization_PG_China.pdf":http://www.prodat-sql.de/redmine/attachments/download/2568/Database_Virtualization_PG_China.pdf