差異處

這裏顯示兩個版本的差異處。

--- database:postgres:alignment [2022/09/25 19:16]
tony [How to?]
+++ database:postgres:alignment [2023/06/25 09:48]
@@ 行 1: / 行 1: @@
-{{tag>PostgreSQL}}
-====== Data Alignment in PostgreSQL ======
-===== Problem =====
-一年前開始處理千萬級資料時，考慮到migration速度與資料儲存空間的使用，才知道資料庫也有alignment的機制。64位元作業系統是8 bytes的對齊，取自[[https://www.enterprisedb.com/postgres-tutorials/data-alignment-postgresql|link]]的範例，對齊前:
-<code>
-CREATE TABLE t1 (
- , a char
- , b int2    -- 1 byte of padding after a
- , c char
- , d int4    -- 3 bytes of padding after c
- , e char
- , f int8    -- 7 bytes of padding after e
- );
-</code>
-對齊後，可節省11位元組空間，不管是儲存空間還是CPU使用效率都會有所提升。
-<code>
-CREATE TABLE t1 (
- , f int8
- , d int4
- , b int2
- , a char
- , c char
- , e char
- );
-</code>
-我的問題是，各種型態所需的數據對齊方式該怎查呢?
-===== How to? =====
-根據[[https://github.com/digoal/blog/blob/762e5c1d2bb03cd37ac0080176e6eb3fa5774d23/201810/20181001_01.md|這篇]]實驗結果，欄位規則如下:
-<code>
-消除tuple PADDING, 字段顺序规则：
-、优先使用定长类型(例如numeric, decimal如果业务上不需要无限精度, 那么请使用定长的整型或浮点型代替)
-、定长字段（从大到小）
-、变长字段
-</code>
-因此我們必須知道哪些是屬於可變長的型態與型態所需要的對齊方式。此[[https://www.enterprisedb.com/postgres-tutorials/data-alignment-postgresql|link]]提供了一個SQL，讓你可以列出所有type的typalign與typlen。其中typalign用於決定所需要的對齊方式；typlen為-1則代表為可變長的型態:
-<code sql>
-select typname,typbyval,typlen,typalign from pg_type;
-</code>
-假如我要找某一種特定type，加入where限制條件即可:
-<code sql>
-select typname,typbyval,typlen,typalign from pg_type where typname='int2';
-</code>
-結果如下，可以發現typalign的字元有多種:\\
-{{:database:postgres:pg_search_typalign.png?600|}}\\
-\\
-接下來就是去[[https://www.postgresql.org/docs/current/catalog-pg-type.html|link]]中搜尋typalign，
-<code>
-typalign char
-typalign is the alignment required when storing a value of this type. It applies to storage on disk as well as most representations of the value inside PostgreSQL. When multiple values are stored consecutively, such as in the representation of a complete row on disk, padding is inserted before a datum of this type so that it begins on the specified boundary. The alignment reference is the beginning of the first datum in the sequence. Possible values are:
-c = char alignment, i.e., no alignment needed.
-s = short alignment (2 bytes on most machines).
-i = int alignment (4 bytes on most machines).
-d = double alignment (8 bytes on many machines, but by no means all).
-</code>
-接著就可以按照前述規則去調整欄位了。型態別名可以參考此[[https://www.postgresql.org/docs/current/datatype.html|link]]。\\
-也可以直接透過以下SQL直接查詢某table的狀態:
-<code>
-# 替換example_table為你的table即可。
-SELECT a.attname, t.typname, t.typalign, t.typlen
-  FROM pg_class c
-  JOIN pg_attribute a ON (a.attrelid = c.oid)
-  JOIN pg_type t ON (t.oid = a.atttypid)
- WHERE c.relname = 'example_table'
-   AND a.attnum >= 0
- ORDER BY a.attnum;
-</code>
-透過上述SQL，可以快速確認調整結果:
-{{:database:postgres:pg_data_alignment_result.png?750|}}
-===== Reference =====
-  * [[https://www.enterprisedb.com/postgres-tutorials/data-alignment-postgresql|Data Alignment in PostgreSQL]]
-  * [[https://www.postgresql.org/docs/current/catalog-pg-type.html|catalog-pg-type]]
-  * [[https://dba.stackexchange.com/questions/286640/does-the-optimized-column-order-for-a-postgresql-table-always-have-variable-leng|Does the optimized column order for a PostgreSQL table always have variable length types at the end?]]
-  * [[https://github.com/digoal/blog/blob/762e5c1d2bb03cd37ac0080176e6eb3fa5774d23/201810/20181001_01.md|PostgreSQL tuple alignment padding (行，字段对齐) - 对齐规则，以及如何选择字段顺序, 如何选择字段类型]]
-=====    =====
-----
-\\
-~~DISQUS~~