Scraps 最終更新 2026/11/16 11:01

#データベース

データベースの設計と運用に関する記事を集めています。スキーマ設計、索引、クエリ性能、トランザクション、移行手順、バックアップなど、後から変更しにくい判断を3行で確認できます。小規模なうちは目立たないが、データが増えてから効く論点を拾うタグです。

@asu7 /

dbt-duckdb の seed に置いた CSV が落ちる理由を調べてみた

  • dbt-duckdb の seed に置いた CSV が dbt seed で落ちる理由は、dbt と DuckDB で CSV の読み方が異なること
  • dbt は CSV を読んで列の型を自動判定し、DuckDB は同じ CSV を読み直して値を入れる。1,000 や全角数字は DuckDB が数として読めない
  • CSV の列型を明示的に指定するか、外部ソースで読み込むことで回避できる

@牟田 瞭太郎 /

Weekly Azure アップデート情報 - 2026/10/02

  • Azure Database for PostgreSQL向けにPostgreSQLスキルおよびMCPプラグインのプレビューが開始された
  • PostgreSQLスキルはAIコーディングアシスタントをエキスパートに、MCPプラグインはデータベースのコンテキストを調査してクエリ実行を可能に
  • PostgreSQLのエキスパート機能を活用する際はプレビュー版の制限を確認する必要がある

@分析屋 /

GA4のBigQueryエクスポート入門 ― スキーマの構造と、つまずきやすい4つのポイント

  • GA4の生イベントデータをBigQueryにエクスポートする際、イベントパラメータはkeyと型別カラムを持つ繰り返しフィールドで、日付別シャーディングされたテーブルを扱う
  • UNNESTでパラメータを取り出し、_TABLE_SUFFIXで期間指定し、スキャン量課金を意識したクエリを書く
  • SELECT *と期間無指定の組み合わせはスキャン量が膨らむため、_TABLE_SUFFIXでの絞り込みと必要なカラムだけを選択する習慣をつける

@shin /

困ったらAIにすぐ聞く3年目エンジニアが社会人になって読んだ技術書 10冊.

  • 3年目エンジニアが社会人になって読んだ技術書10冊を紹介している
  • マイクロサービスアーキテクチャやソフトウェアアーキテクチャの基礎,How Google Works,データサイエンス超入門,SQL徹底指南書,データベース設計,Go言語入門,ドメイン駆動設計などの本が挙げられている
  • アーキテクチャやデータベース設計,DDDなど技術的知識を深める本が中心で,エンジニアとしてのスキルアップに役立つ

@GS2 Blog /

検証アクションが失敗したときのエラーに、検証した時点の値が含まれるようになりました

  • 検証アクションのエラーに実際の値が含まれるようになった
  • VerifyStaminaValueなどの検証APIで失敗時のスタミナ値、インベントリ所持数、グレードなどの実際の値がエラーに記録される
  • エラー発生時の実際の値が確認できるため、不具合の原因特定がしやすくなる

@GS2 Blog /

GS2-Money2 で App Store / Google Play の返金履歴を取得できるようになりました

  • GS2-Money2でApp Store/Google Playの返金履歴が取得できるようになった
  • 返金通知を受信してRefundHistoryを記録、DescribeRefundHistoriesByUserIdとGetRefundHistoryで取得可能
  • 返金通知はサブスクリプションの更新通知と同じURLで受け取るため、設定を確認する必要がある

@gensan64311466 /

MongoDBの設計思想から理解する、RDBとのメリット・デメリット(Rails / Mongoid)

  • MongoDBは関連データを1ドキュメントにまとめ、1サーバーで操作する設計思想を持つ
  • ドキュメントモデルとスキーマオンリードの2つの特徴、RDBとの比較でJOINやトランザクションの違いが明確
  • アプリケーション側が関連データの整合性を保つ責任を持つため、削除時にdestroyを使うなどコードルールを厳守する必要がある

@むーさん /

Amazon Timestream for InfluxDB 3.0に入門してみた

  • Amazon Timestream for InfluxDB 3.0はInfluxDBのOSSをAWSがマネージドで提供している時系列データベース
  • Parquetファイルでデータを保存し、10分ごとにファイルが作成される。クエリで1024ファイル以上読めない制限がある
  • Core版は7日を超える範囲のクエリができないため、直近1週間程度のデータを扱う用途に適している

@mo__mo /

OCI Database ServicesのマネージドMCPサーバーをCodexから使ってみた

  • OCI Database ServicesでマネージドMCPサーバーが利用可能に、自然言語でDB情報の取得や集計が可能になった
  • MCPクライアントとOCI Databaseのコントロール・プレーンAPIをつなぐ機能、ListDbHomesやListDatabasesなどのツールで情報取得
  • MCPサーバーの作成にはドメイン参照権限とコンパートメントのOCIDが必要で、取得結果の解釈には注意が必要

@Kou /

「【Laravel】中央DBはもう古い?分散SQLiteと複数Guardで構築する次世代アーキテクチャ」~【laravel】人気記事

  • Laravelで複数のGuardと分散SQLiteを組み合わせたアーキテクチャが提案された
  • Guardによる認証分離とSQLiteの2社間リンクごとの分離が実装例として示された
  • 中央DB依存からの脱却とデータ分離によるロック競合回避が実務上のポイント

@xin9le /

[破壊的変更] 明治時代の開始日が変更になって単体テストが失敗した件

  • 明治時代の開始日が1868年9月8日から10月23日に変更され、単体テストが失敗した
  • ICUの更新でCLDRの旧データが修正され、.NETのJapaneseCalendar.MinSupportedDateTimeも変更された
  • 和暦対応のコードでは日付の基準を確認し、.NET 11以降では最小サポート日付が変更されている

@smasui /

ISUCON 2026参加記

  • ISUCON 2026でPythonチームが60,719点を獲得し、公式TOP10で最高スコアを記録した
  • 画像投稿アプリのISURealでリージョン間通信の制約とDB往復回数の削減、署名計算をCに移行した
  • リージョン間通信の遅延と帯域制限を考慮したDB接続のロック戦略と、画像保存の変更がスコアに影響した

@FORCIA Tech Blog 運営チーム /

データ連携をボトルネックにさせないためのpostgres_fdwチューニング

  • postgres_fdwの設定を見直すことで、リモートDBからのデータ取得時間を80分から1分半に短縮できた
  • use_remote_estimateとANALYZEで統計情報を活用し、fetch_sizeを100から10,000に変更して往復回数を減らした
  • 外部テーブルの統計情報が不正確だと非効率な実行計画が選ばれるため、use_remote_estimateやANALYZEを実施する

@anderslee2020 /

postgres:18 が起動直後に終了する原因:データディレクトリの場所が変わった(16 → 18 移行手順付き)

  • PostgreSQL 18 の Docker イメージでデータディレクトリの場所が変更された
  • 17 までは /var/lib/postgresql/data だったが、18 からは /var/lib/postgresql/18/docker に変更。Volume のマウント先も /var/lib/postgresql にする必要がある
  • 既存のデータを移行する際は pg_dumpall でダンプしてリストアする必要があり、メジャーバージョンアップはデータを失わないための手順が必要

@kota /

AWSでデータレイクハウスを構築してApache Icebergの更新・履歴管理を検証した

  • AWSのS3、Glue Data Catalog、Athena、Apache Icebergを組み合わせてデータレイクハウスを構築し、更新と履歴管理を検証した
  • Icebergのスナップショットで履歴参照、UPDATE/DELETEでS3のParquetファイルが変更され、OPTIMIZEでファイルを最適化した
  • S3上のデータファイルとメタデータを分離して管理し、削除情報はPosition Deleteファイルに保存されることが確認できた

@nr_ishibashi /

Stored Procedureはじめました。データベースのパフォーマンスリスクを可視化するDB360がついにGA!

  • New RelicのDB360がGAとなり、ストアドプロシージャのパフォーマンス可視化機能が追加された
  • ストアドプロシージャ専用モニタリング画面とブロッキングチェーンの可視化、OpenTelemetry準拠の導入が可能
  • ストアドプロシージャの処理時間やボトルネックを直接分析できるようになり、運用時の問題特定がしやすくなった