Projekt

Allgemein

Profil

710 Datenbankeinstellungen und Tuning (postgresql conf) » Historie » Version 68

[S] Philipp K, 18.04.2019 10:30

1 42 [X] Daniel S
h1. postgresql.conf: Datenbankeinstellungen und Tuning
2 1 [X] Daniel S
3 26 [S] Philipp K
4 23 [E] Oleg G
@postgresql.conf@ ([[PostgreSQL Netzwerkkonfiguration (pg_hba.conf)]])
5 1 [X] Daniel S
6 56 [S] Dominik G
Datei-Pfad: *..\PostgreSQL\9.6\data\pg96\postgresql.conf*
7 25 [E] Oleg G
8 58 [S] Philipp K
h2. Prüfen der wichtigsten Postgreseinstellungen mittels Datenbankfunktion
9
10 65 [E] Frank S
Die Funktionen heißen @TSystem.database_settings__initialize()@ und @TSystem.database_settings__validate()@ und muss bei Neuerungen entsprechend angepasst oder erweitert werden.
11 54 [S] Philipp K
12 1 [X] Daniel S
h2. Konfiguration PostgreSQL (Beachte Betriebssystem) ab Version 9.3 
13 54 [S] Philipp K
14 51 [X] Daniel S
Beachte Programm-Start-Prüfung PRODAT: #9933
15 60 [S] Philipp K
Für ein 16GB RAM System
16
@shared_buffers = 4096MB@ Daumenregel: ca 1/4 Des RAMs den Rest für effective_cache_size
17 1 [X] Daniel S
@temp_buffers = 8MB@
18 68 [S] Philipp K
@work_mem = 32MB@ (nicht zu hoch, da je sort bzw. hash Operation, auch mehrfach bei komplexen queries){{collapse(Info)
19
https://www.citusdata.com/blog/2018/06/12/configuring-work-mem-on-postgres/
20
21
}}
22 1 [X] Daniel S
@maintenance_work_mem = 512MB@ (für VACUUM, CREATE INDEX, and ALTER TABLE ADD FOREIGN KEY, außerdem für restore dumps)
23 49 [S] Philipp K
@dynamic_shared_memory_type = windows@
24 1 [X] Daniel S
25 49 [S] Philipp K
@max_worker_processes = 8@ > Default ist 8 (keine Änderung nötig). Je nach Unternehmensgröße mehr
26 66 [E] Frank S
° @max_parallel_workers_per_gather = 4@
27 1 [X] Daniel S
28 49 [S] Philipp K
@fsync = off@
29
@synchronous_commit = off@
30 45 [X] Richard H
@wal_compression = on@
31 44 [X] Richard H
@wal_buffers = -1@    (bis 9.3 8MB)
32 1 [X] Daniel S
@max_wal_size = 3GB@     (ab 9.6 Ersatz für checkpoint_segments3 * checkpoint_segments) * 16MB )
33
34 66 [E] Frank S
° @max_locks_per_transaction = 128@
35 62 [X] Daniel S
36 60 [S] Philipp K
@effective_cache_size = 12288MB@ (Beachte, wenn Server nur für PRODAT dann 3/4 des Arbeitsspeichers, wenn auch andere Programme dort laufen dann 1/2 Arbeitsspeicher. Gibt an wieviel RAM-Cache Postgressql erwarten kann, für Indizies usw)
37 1 [X] Daniel S
38
@default_statistics_target = 1000@
39 38 [X] Daniel S
40 66 [E] Frank S
° @seq_page_cost = 2.0@ (Mache sequentielle Scans "teurer": Der Planer ist eher geneigt, den Index zu nutzen)
41
° @cursor_tuple_fraction = 0.75@ (siehe #6436) (Steuert, dass das CURSOR-FETCH (F2-Fenster) anders errechnet wird und es Blöcke früher zurückgibt)
42 47 [S] Philipp K
43 1 [X] Daniel S
@log_destination = 'eventlog'@ (unter Windows)
44 55 [S] Dominik G
@#log_checkpoints = off  # default off@ (auf Default setzen)
45 56 [S] Dominik G
@log_line_prefix = '<%u@@@%d-%t> '@
46 66 [E] Frank S
° @log_autovacuum_min_duration = 250ms  # default -1@ (auf Default setzen) > alles was länger 250ms dauert loggen und bei Gelegnheit prüfen
47 1 [X] Daniel S
48 46 [E] Oleg G
@search_path = '"$user",public,TSystem,prodat_languages,Z_99_Deprecated'@
49 1 [X] Daniel S
50
@datestyle = 'iso, dmy'@
51
52
@standard_conforming_strings = off@ (siehe #4860)
53
54 66 [E] Frank S
° @lc_messages = 'en_US.UTF-8'@ (Das muß sein, da wir die Fehlermeldungen teilweise parsen und somit auf die Fehler-Strings gehen.)
55 1 [X] Daniel S
56
@lc_monetary = 'German_Germany.1252'@ (Lokale je nach Land)
57
@lc_numeric = 'German_Germany.1252'@
58 56 [S] Dominik G
@lc_time = 'German_Germany.1252'@
59
60
{{collapse(Alte Versionen:)
61 1 [X] Daniel S
@checkpoint_segments = 64 # in 9.6 nicht supported@
62 66 [E] Frank S
° @statement_timeout = 120000@ Bis Prodat 11.5.3@ wird clientseitig im Prodat gesetzt (480000 und für AppServer/Admins 1200000)
63 49 [S] Philipp K
}}
64 66 [E] Frank S
65 67 [E] Frank S
!!! ° = *Für einige Werte gibt es Vorgaben und Prüfungen, in den Client-Sessions.*
66 66 [E] Frank S
!!! siehe @TSystem.database_settings__initialize@ und @TSystem.database_settings__validate@ (PSQL\0050 System\010 Functions TSystem.sql)
67 1 [X] Daniel S
68 57 [S] Dominik G
h2. Reload
69
70
Konfiguration im laufenden Betrieb neu laden.
71
@..\PostgreSQL\pg96\bin\pg_ctl reload -D ..\PostgreSQL\data\pg96@
72
73 34 [X] Daniel S
74
h2. Linux 
75
76
{{collapse(Linux)
77
78
h3. Betriebssystem - Speichereinstellungen mind. 3GiB Arbeitsspeicher!
79
80
* standard:
81
sysctl kernel.shmmax
82
kernel.shmmax = 33554432
83
84
* umsetzen auf 280437720 (256MB, Mindestens, LOLL steht auf 1024MB (8GB Ram)) (On Windows the useful range is 64MB to 512MB)
85
/etc/sysctl.conf  -> zeile aufnehmen: kernel.shmmax=280437720
86
reboot
87
88
h3. Nur auf Systemen mit 3GiB+ RAM anzuwenden
89
90
@$ free -m@
91
<pre>
92
             total       used       free     shared    buffers     cached
93
Mem:          3018       1516       1501          0        208       1113
94
-/+ buffers/cache:        194       2823
95
Swap:         1023          0       1023
96
</pre>
97
98
99
h3. Weiteres
100
101
Unter Linux ist noch die shmmax-Option aus der 99-postgresql.conf via sysctl zu setzen, sonst klappert das da.
102
http://www.postgresql.org/docs/8.2/static/kernel-resources.html
103
104
}}
105 1 [X] Daniel S
106 19 [S] Dominik G
107 14 [S] Dominik G
Könnte durchaus noch weiter getrieben werden, indem man Sie auf die Prodat-DB abstimmt:
108 13 [S] Dominik G
* http://wiki.postgresql.org/wiki/Tuning_Your_PostgreSQL_Server
109 11 [X] Daniel S
* http://www.postgresql.org/docs/current/static/performance-tips.html
110 13 [S] Dominik G
* "five_steps_perform_2009.pdf":http://www.prodat-sql.de/redmine/attachments/download/2528/five_steps_perform_2009.pdf Dokument über Einstellungen etc
111
112 19 [S] Dominik G
113
*Hinweis:* Fehler im PgAdmin/Server-Status: ungültige Byte-Sequenz für Kodierung "UTF8" ... durch SELECT pg_file_read('pg_log/... kann ignoriert werden, da wir ja ins eventlog schreiben.
114
Die Anzeige vom Log hier einfach schließen. Liegt an LC_MESSAGES und mehrsprachigen Systemen, vermutlich ein Bug, Workaround LC_MESSAGES='C' (evtl. nicht mit Prodat kompatibel)
115 11 [X] Daniel S
116 12 [X] Daniel S
117 13 [S] Dominik G
h2. Virtualisierung
118 12 [X] Daniel S
119 13 [S] Dominik G
"Database_Virtualization_PG_China.pdf":http://www.prodat-sql.de/redmine/attachments/download/2568/Database_Virtualization_PG_China.pdf