Hatena Blog Tags
はてなブログ トップ
pg_dump
このタグでブログを書く
言葉の解説
ネットで話題
関連ブログ

pg_dump

(コンピュータ)
【ぴーじーだんぷ】

postgresqlのパッケージに含まれているプログラムの１つ
データベースの情報をファイルに出力する事ができる。

例
　hogeがオーナーの foo データベースから bar テーブルをダンプする。

　pg_dump -U hoge -t bar foo > example.dump

　引数として -d ( copyコマンドではなくINSERT文でデータを挿入する）を使うとバージョン間の互換性が良くなる。

このタグの解説についてこの解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。
SPIDERPLUS Tech Blog•1日前

本番環境のデータベースを落として得た、学びと対策

こんにちは、技術推進部の佐藤です。 4 月ということもあり、社会人デビューをされた方たちを目にする機会が増えました。 「自分が若かった頃はこんなにしっかりしていたかな」などと懐かしんでいたら、ふと以前在籍していた会社で血の気が引くような失敗をしたことを思い出しました。 今回はそのお話をいたします。 ただ、その失敗から得た対策のおかげで、今まで 10 年以上もの間に一度も同じような失敗を起こしていません。 これからデータベースを触る方、今まで触っていても失敗したことがない方はご参考になれば幸いです。 何が起こったのか 背景 事件 どう対処したか 初動 その後 収束 学びとその後の対策 防止する仕…

ネットで話題

もっと見る
31ブックマーク論理バックアップ（pg_dump と pg_dumpall） — Let's PostgresNTT オープンソースソフトウェアセンタ 鈴木 幸市 3. 論理バックアップとリストア 論理バックアップを行うツールは pg_dump 及び pg_dumpall です。 pg_dump は PostgreSQL データベースクラスタの各データベース単位にバックアップを行います。pg_dumpall はターゲットのデータベースクラスタに格納してある全データベ...lets.postgresql.jp
23ブックマークPostgreSQL: 非特権ユーザーによる pg_dump と pg_restore - tkrdの日記tkrd.hatenablog.com
20ブックマークpg_dumpによるバックアップ[PostgreSQL] pg_dump [データベース名]にてバックアップを取ることが可能。その際、データベースの所有者にsuしておいた方がよい。 [pg_dumpの主なオプション] -a データのみをダンプ -b ラージオブジェクトもダンプする。（注: デフォルトではダンプされません） -d INSERTコマンドにてダンプ（通常はCOPYコマンド) -D...www.ksknet.net
13ブックマークpg_dumpSynopsispg_dump [-a | -s] [-b] [-c] [-C] [-d | -D] [-f file] [-F format] [-i] [-n | -N] [-o] [-O] [-R] [-S] [-t table] [-v] [-x] [-Z 0...9] [-h host] [-p port] [-u] dbname 説明 pg_dump は Postgres データベースを、問い合わせコマンドを含むスクリプトかアーカイブファイル にダンプするためのものです。...osb.sra.co.jp
8ブックマークPostgreSQL の dump をテーブルごとに分割する pg_dump_splitter.pl - 酒日記 はてな支店sfujiwara.hatenablog.com
8ブックマーク論理バックアップ（pg_dump と pg_dumpall） | Let's POSTGRESNTT オープンソースソフトウェアセンタ 鈴木 幸市 3. 論理バックアップとリストア 論理バックアップを行うツールは pg_dump 及び pg_dumpall です。 pg_dump は PostgreSQL データベースクラスタの各データベース単位にバックアップを行います。pg_dumpall はターゲットのデータベースクラスタに格納してある全データベ...lets.postgresql.jp
7ブックマークPostgresをpg_dumpでバックアップ pg_restoreで再構築Landscape トップページ | < 前の日 2002-09-04 2002-09-10 次の日 2002-09-11 > Landscape - エンジニアのメモ 2002-09-10 Postgresをpg_dumpでバックアップ pg_restoreで再構築 当サイト内を Google 検索できます * Postgresをpg_dumpでバックアップ pg_restoreで再構築この記事の直リンクURL: Permlink | この記事が...sonic64.com
5ブックマークAmazon Linux2 から pg_dump と pg_restore で RDS for PostgreSQL のバックアップ・リストアを検証してみた | DevelopersIOdev.classmethod.jp
5ブックマークPostgreSQLのpg_dump、pg_restoreについてまとめる | my opinion is my ownはじめに これから何度も調べることになりそうなので、PostgreSQLのpg_dump、pg_restoreについてまとめておく。 スクリプトファイル形式とアーカイブファイル形式でバックアップが可能。それぞれでリストア方式が異なる。 スクリプトファイル形式の論理バックアップ : psqlでリストア アーカイブファイル形式の論理バッ...zatoima.github.io

関連ブログ

サーバーワークスエンジニアブログ•5日前

AWSから抜け出す方法も考えておく【ガバメントクラウド】

こんにちは、Enterprise Cloud部 ソリューションアーキテクト1課 宮形 です。今年に入ってガバメントクラウドのブログを書くようになりまして、どの記事も前向きでポジティブな内容を心がけておりましたが、今回は一転して後ろ向きなタイトルになります。 本BLOGではガバメントクラウドにおいてAWSに各システムをリフト＆シフトした後に、AWSから抜け出す方法 について検討した内容を記載させていただきます。 このBLOGを書こうと思い立った理由 AWSから抜け出す方法を各サービス毎に検討する 仮想サーバー EC2 データベースのマネージドサービス RDS、Aurora コンテナの実行環境 E…

taiskill•11日前

【PostgreSQL】カラム名検索

カラム名で検索したい時は以下のようにする select table_name, column_name from information_schema.columns where column_name ='カラム名'; 登録したデータがどこに入っているのか分からない時は以下のようにする pg_dump --data-only --inserts -U postgres DB名 > a.txt a.txtをvi等で開いて、探したいデータを検索する

KaiGaiの俺メモ•1ヶ月前

pg2arrowを並列化する

今回は皆さんが大好きな便利ツール「pg2arrow」のお話です。PostgreSQLでポータブルな列指向データ形式 Apache Arrow を読み出すには、Arrow_Fdwを利用する事ができます。 PG-StromではGPU-Direct SQLにも対応していますし、列指向データという事もあって、被参照列しかI/Oが発生しない、同じ列のデータが近傍に固まっているという大量データ処理に適した特性を持ってもいます。また、Apache Arrow形式のファイルを作成するにはPyArrowやPandasなど様々なツールがありますが、我々DB屋としてはPostgreSQLに格納されたトランザクショナ…

UGA Boxxx•1ヶ月前

【PostgreSQL】データのバックアップとリストア

Cloud SQLのDBからデータのバックアップをスキーマごとローカルに持ってきたい 手順が以下にあったのでメモ cloud.google.com まず、Cloud SQLからデータをバックアップする $ pg_dump --dbname="my_context" --schema='"my_context"' --file="/uggds/my-project/{data_source}-{timestamp}-dump.dmp" --format=c --no-owner --no-acl リストアする $ pg_restore --dbname=local_my_context "/ug…

コレグレーデギネード•2ヶ月前

PosgreSQLのデータベースのバックアップとリストア

デフォルトのバックアップコマンド pg_dump ・デフォルトのスクリプト形式を選択するとpsqlコマンドでリストアできる。 $ pg_dump database名 > backup_file名リストアコマンド psql $ psql database名 < backup_file名アーカイブ形式のリストアコマンド pg_dump アーカイブ形式の場合はpg_dumpに-Fオプションをつける $ pg_dump -Fc database名 > backup_file名・-cはcustom形式を表す。-tとするとtar形式になる リストアコマンド pg_restore $ pg_restore …

Oisix ra daichi Creator's Blog（オイシックス・ラ・大地クリエイターズブログ）•3ヶ月前

オンプレPostgreSQLをAmazon Aurora PostgreSQLへ移行しようとしてINDEX作成にハマりました

SREの林 aka もりはやです。 先日オンプレで稼働していたとあるPostgreSQLのDBを、Amazon Aurora PostgreSQL（以後はAurora）に移行を行ったところ CREATE INDEX が以下のエラーで作成できない問題に苦労させられたため、解決策と合わせて公開します。 これがベストな対応かは自信がないため、より良い方法をご存知の方はお気軽に教えてください。 以下はDBのリストア中に CREATE INDEX で発生したエラーです。 pg_restore: error: could not execute query: ERROR: could not write …

KAYAC engineers' blog•5ヶ月前

Rails+PostgreSQL+Apartmentでたった1行の変更がレスポンスタイムを3倍速にした話

こんにちは！ Tech KAYAC Advent Calendar 2023 11日目を担当する荒賀(@ken39arg)です。 在籍期間15年と弊社の中でかなり古参になってしまった私ですが、アドベントカレンダーを年に2本書くのは初めてです。1 今回の内容は、今年7月に無事に成功したお仕事の話で、完了したらブログに書くように言われていたものです。 が、どうしても筆が進まず、のらりくらりと逃げていたのですが、良い年越しをするためにいい加減書いておくか〜という内容です。 TL;DR Rails + PostgreSQL + Apartment という構成のサービスで下記の1行の設定変更コミットを取…

にせねこメモ•5ヶ月前

Pleromaサーバーお引越し

引っ越しました。 環境 Pleroma v2.6.0 元サーバ ConoHa VPS 512MBプラン Ubuntu 20.04 先サーバ さくらインターネット VPS 1GBプラン Ubuntu 22.04 作業内容 VPS作成とOSインストール さくらインターネットのVPSでOS (Ubuntu 22.04)をインストール、公開鍵を登録 ログイン ローカルからログイン ssh ubuntu@NEW_SERVER_IP 更新・ユーザ追加 新サーバ 更新 sudo apt update sudo apt upgrade ユーザ追加 sudo adduser nixeneko sudo gpas…

shibatch's journey•5ヶ月前

Herokuのデータベースを(Kubernetes Podを経由して)Amazon Auroraにデータ移行してみた

この記事はGMOペパボエンジニア Advent Calendar 2023の10日目になります🎄 最近PaaSであるHerokuにあるサービスをAWS(Amazon EKS on Fargate)で動かそうとしています。まだ検証段階ではあるものの、動作するところまではこぎつけました。HerokuとAWSを以下の組み合わせで移設しようとしています。 Heroku Dynos → Amazon EKS Heroku Postgres(Add-on) → Amazon Aurora PostgreSQL Redis Cloud(Add-on) → Amazon ElastiCache for Red…

kasei_sanのブログ•5ヶ月前

RDS Auroraのreaderからのpg_dumpの途中で接続が切れる場合、max_standby_streaming_delay を上げると良いよ

タイトルで言いたいことだいたい言っちゃったんですが、 readerエンドポイントでpg_dump を実行していたら、大きめのテーブルをdumpしている時に接続がちょこちょこ途切れる現象が発生していました。 それで、DBのログを見てみたら以下のエラーがありました FATAL: terminating connection due to conflict with recovery DETAIL: User was holding a relation lock for too long. これは、以下のサイトに詳しいのですが www.fujitsu.com 「writer側の更新によるWAL(ト…

AGRISMILE DEV BLOG•5ヶ月前

HerokuのOne-off dynoを踏み台サーバーとしてデータベースのダンプを取得する

こんにちは。プロダクト開発部の新田です。 AGRI SMILEで、複数プロダクトをフロントエンド・バックエンドに亘って開発する業務をしています。 AGRI SMILEでのHerokuのユースケース AGRI SMILEでは、オンラインで学術集会を開催できるプラットフォーム、ONLINE CONFを提供しています。 このシステムはHerokuを利用してホスティングされています。 なぜAWSやGCP等のクラウドインフラでなくPaaSであるHerokuを利用しているかというと、WEBアプリケーションエンジニアであっても容易にインフラをコントロールできるのが一つの理由ですが、なにより学術集会の性質との…

本日も乙•7ヶ月前

脳内ダンプ（Dump）することで自分自身をデバッグする

今日も北海道のニセコにいますが、これから帰ります。電車+飛行機の長旅ですね。 IT用語に「ダンプ（dump）」というのがあります。dumpという英単語そのものは「中身を放出する、ゴミを捨てる」という意味だそうですが、IT系に限ると以下のような意味になります。 ダンプとは、デバッグやデータ修復のために、ファイルやメモリの内容をディスクに出力することである。 ダンプされたファイルにはダンプ作成時のメモリ上のデータが丸ごと書き出される。プログラムの開発などを行う場面では、データをダンプしてデバッガに読み込ませると、プログラムの問題点を発見できることがある。特にUNIX系OSにおける、メモリを強制的に…

external storage 1•7ヶ月前

pg_dump 整合性

pg_dumpで作成されたダンプは、内部的に整合性があります。 つまり、ダンプはpg_dumpが開始された際のデータベースのスナップショットを示しています。https://www.postgresql.jp/document/15/html/backup-dump.html pg_dumpで作成されたダンプは、内部的に整合性があります。つまり、pg_dumpが行われている際のデータベース更新はダンプに含まれません。pg_dumpの操作はデータベースに対する他の作業を妨げません（VACUUM FULL などの、排他的なロックが必要な作業は例外です）。https://www.postgresql.…