やりたいこと テーブル内に格納されているレコードのブロック番号を調べたいってときありますよね？ 環境は PostgreSQL 12.3 です。が、多分どのバージョンでも大丈夫です。 調べる pg_visibilityという拡張モジュールを使うと確認することができます。 post…

PostgreSQLでレコードのブロック番号を調べる方法

PostgreSQLの話です。 パラメータを変更する方法 postgresql.confを変更する。 ALTER SYSTEM SET コマンドで変更する。 SET コマンドで変更する。 の3通りでしょうか。 1のpostgresql.confの変更と、ALTER SYSTEM SET コマンドの変更では永続的に変更されま…

PostgreSQLのパラメータを変更する。

環境 CentOS7 PostgreSQL のバージョンは問いません。 CentOSの設定 localectl set-locale LANG=ja_JP.UTF-8 localectl set-keymap jp106 timedatectl set-timezone Asia/Tokyo ロケール（文字コード？ エンコード？ エンコーディング？）を日本語でUTF8にし…

CentOS7上のPostgreSQLを日本語環境にする。

PostgreSQLの話をしていて、知らなかったのですがPINとかいうものがあるそうで、色々と確認してみました。 が、ドキュメントの類には全くPINの解説などがでてこず、よくよく話を聞いてみると"src/backend/storage/buffer/README"に書かれているそうです。 な…

共有バッファのPIN

前回のチェックポイント実行から checkpoint_timeout 秒経過した時 max_wal_size に指定したサイズ分のWALログレコードがWALセグメントファイルに書き込まれたとき CHECKPOINTコマンドを実行したとき PostgreSQL が正常に停止されたとき pg_basebackup 関数…

チェックポイントの発生タイミング。

VACUUMを実行した場合にいつまで経っても完了しない場合、どれだけ進んでいるのかとか、実はフリーズしているんじゃないかとか色々考えてしまいますよね。 そんなときに"pg_stat_progress_vacuum"を確認すれば進捗状況が分かるそうです。 www.postgresql.jp …

PostgreSQLでVACUUMの進捗状況を把握したい。

PostgreSQLでのdump／restore（バックアップリストア）が個人的にすんごいややこしい。特にアーカイブ形式がややこしい。その中でも何がややこしいかってpg_restoreがややこしい。 平文形式とアーカイブ形式でリストアの方法が違うのがややこしい 平文系式 →…

PostgreSQLのdump／restoreで個人的に分かりにくいところ

タイトルの通り、PostgreSQLがバージョン12から追記型アーキテクチャではなくなってVACUUMとかが要らなくなる、というお話をチラチラ聞いたことがあるのですが、色々ググってもそんな話は全く無く不思議に思っていました。 で、最近見つけたのが PostgreSQL …

PostgreSQL12は追記型アーキテクチャじゃなくなる？

概要 タイトルの通り、CentOS 5にPostgreSQL9.2をインストールしたい。ということです。正直、大変でした。 環境 Vagrant 2.2.7 CentOS 5.11 手順 yumのリポジトリURLを変更する zlib-develをyumでインストールする readline-develをyumでインストールする P…

CentOS 5にPostgreSQLをインストールする。

確認する 書き込み対象のWALファイルの名前を確認する（WALログ書き込み位置 → WALファイル名）。 PostgreSQL 10以降 pg_walfile_nameとpg_current_wal_lsnを組み合わせて確認します。 SELECT pg_walfile_name( pg_current_wal_lsn() ); な感じです。 Postgr…

PostgreSQLで現在書き込み中のWALのファイル名を確認する。

-tオプションをつけてテーブル名を指定してリストアしたところ、実行が空振り（すぐに終了）する。もちろんテーブルはリストアされていない。 何故かと色々検証してみたところ、テーブル名が大文字小文字を判別している模様。 つまりはTB_NAMEっていうテーブ…

-tオプションをつけてテーブル名指定でpg_restoreしたけどリストアされない。

概要 パラメータを変更したのに変わっていなかった。ということに関するお話し。 SETコマンド SETコマンドでパラメータを変更したのに、次に接続してみたらパラメータの変更が元に戻っていた。そんなお悩み、ありますよね。それはSETコマンドがそのセッショ…

パラメータを変更したのに変更されない（PostgreSQLのお話し）

概要 いつも通りにVACUUM ANALYZE VERBOSEを実行してみたらエラーになった。ので調べてみた。けど原因は不明。 環境 PostgreSQL 11とか9とか色々 実行内容 コマンド VACUUM ANALYZE VERBOSE; これを実行すると エラー内容 ERROR: syntax error at or near "V…

VACUUM ANALYZE VERBOSEでエラーが発生する。

概要 基本的にデータベースではデータの並び順は保証されていません。データはインデックス通りに並んでいる訳でもなく、また、入れた順番に入っているわけでもなく、データベースの思うままに格納されています。そして勝手に並べ替えられたりすることもあっ…

PostgreSQLでデータの並び順を確認する。のと、並べる方法。

概要 テーブルの定義を変更しようとしたら、誰かがSELECT文を投げていて待たされる。そんな経験、誰もがお持ちですよね？ そこでどんな処理でロックがかかっているのかが分かればストレスも多少は軽減されます。 環境 PostgreSQL 10です。 調べる SELECT loc…

PostgreSQLでテーブル指定でロックを調べるSELECT文

環境 多分、PostgreSQL 10ぐらい 取得する テーブルと外部テーブルとパーティションテーブル（親）をSELECTする。 SELECT nam.nspname , cls.relname , cls.relkind FROM pg_class cls INNER JOIN pg_namespace nam ON cls.relnamespace = nam.oid WHERE cls…

PostgreSQLでテーブル一覧を取得する。

いっつも忘れるのでメモ。 SELECT * FROM pg_proc 定義されているスキーマを知りたい場合は SELECT * FROM pg_proc INNER JOIN pg_namespace ON pg_proc.pronamespace = pg_namespace.oid でOK。

PostgreSQLで関数を確認したい。

逆に考えて繋がらなくってもいいさ、って考えられたらいいんですけど、そうも言っていられないのが現実。 タイムアウトの場合は大抵ファイアウォールが閉じていたりします。 firewall-cmd --all-list で該当のIPアドレスからの5432ポートへのTCP接続が空いて…

PostgreSQLに接続しようとしたらタイムアウトになる

概要 タイトルの通り、権限エラーが発生したときのお話です。 環境 PostgreSQL 10.3ぐらい 内容 user_nameっていうユーザで、新しく作成したデータベースにログインして SELECT * FROM table_name; ってすると ERROR: リレーション"table_name"は存在しませ…

PostgreSQLでの権限エラーへの対応

概要 いわゆる、GRANTさんの話。スキーマに対する権限を付与するときの注意点です。 環境 PostgreSQL 10.3ぐらい 内容 スキーマに対する全ての権限を付与しようと思って GRANT ALL ON SCHEMA schema_name TO role_name; としても、スキーマ内のテーブルへの…

PostgreSQLでスキーマに対する全ての権限をユーザーに設定するときの注意点

OracleでいうTNSPINGみたいなのをPostgreSQLでいうとPG_ISREADYになります。 使い方は↓で pg_isready

OracleでいうTNSPINGみたいなのをPostgreSQLでいうとPG_ISREADY

概要 pg_dumpに-nをつけてスキーマ単位でのダンプを取得した際に、拡張機能がダンプに含まれないことについての脳内放出。 環境 PostgreSQL 10.5ぐらい 実際にやってみる 対象 項目 値 データベース名 test スキーマ名 public やってみた CREATE EXTENSION t…

pg_dumpとEXTENSION

概要 pg_restoreのオプションの挙動に理解が追いつかないので、脳内アウトプット。ので、内容が不正確な可能性が大いにあります。 環境 PostgreSQL 10.5ぐらい 難しいの -d オプション リストア先のデータベースの名前を指定する。 つまりは、-d db_nameとし…

pg_restoreのオプションで-dとか-cとか-Cとかが難しい。

概要 タイトルが全てを物語っているので多くは語りません。 環境 PostgreSQL 10.5ぐらい 測ってみた CREATE TABLE test_table ( val CHAR(12) ); っていうテーブルがあったとして INERT INTO test_table VALUES('test'); とした後に SELECT val, LENGTH(val)…

PostgreSQLでのLENGTH関数で文字列の長さを測ってみる（空白は取り除かれちゃうよ）

概要 お客さんとお話ししていて、たまに話題になるのが、pg_dumpで圧縮（-Fc）するとどれぐらいサイズ減りますかね？ っていうこと。なので記録として残しておく。 pg_dumpやpg_dumpallで出力されるファイルには、不要領域とか不要タプルとかデッドタプルと…

PG_DUMPの圧縮具合というか、出力されるファイルのサイズ感

概要 pg_dumpのCオプションについて、調べたメモ 環境 PostgreSQL 10.3 調べたこと dumpの取得 pg_dump -C -U postgres target_db_1 > target_db_1.dmp dumpのリストア psql -U postgres < target_db_1.dmp -> target_db_1に格納される。 psql -U postgres t…

pg_dumpのCオプションとリストア先データベースの関係

概要 PostgreSQLで、例えばparentという名前のユーザー（ロール？）でログインしている最中に、childというユーザーに切り替えたい。 環境 PostgreSQL 10.3 ※そろそろ10.5にしたい。 変更 SET ROLE child でOK。 確認 SELECT CURRENT_USER; で確認。 使い所 …

PostgreSQLでログイン中のユーザーを切り替える。

したいこと リモートホストのPostgreSQLからデータを引っこ抜きたい。 環境 PostgreSQL 10.3 コマンド 自端末から pg_dump -h xxx.xxx.xxx.xxx -U user_name -d database_name > output_dir でOK。-hにリモートホストのIPアドレスを指定する。 ちなみに-Fcオ…

リモートホスト上に稼働しているPostgreSQLに対してpg_dumpする。

概要 タイトルのまんまです。SQLでびっくりしたことです。 環境 PostgreSQL 10.3 びっくりしたこと ORDER BYでNULLの順序を指定できる。 SELECT code, name FROM data_table ORDER BY code NULLS LAST; とかでNULL値のソート順を最後尾にできる。FIRSTを指定…

SQLでびっくりしたこと。

概要 タイトルの通り、PostgreSQLでUpdate文を実行した結果を確認したいときのお話です。UPDATE文にRETURNING句を追加することで確認できます。 環境 PostgreSQL 10.3 コード UPDATE test_table SET col_a = 10 WHERE col_key = 999 RETURNING *; ※ RETURNIN…

PostgreSQLでUpdateした結果を確認したい。