Scraps 最終更新 2026/11/16 11:31

#データベース

@Subara3 /

【セキュリティ】お客さんからの「うちは大丈夫?」に答えるため、IPAの点検項目をレガシーPHPのECサイトで上から順にやってみた

  • IPAの点検項目に従って、レガシーPHPのECサイトでセキュリティを精査した
  • アクセスログの異常検出、不要なファイルの削除、PHPバージョンの更新、管理者アカウントの見直し
  • ログの異常や不要なファイルはすぐに削除し、セキュリティ脆弱性のあるPHPバージョンは更新する

@shirok /

BlogでたどるSelect AI入門:多言語からAI Ready Data、SQL+RAGまで整理してみてみた

  • Select AIは多言語でDatabaseに問い合わせ可能で、タイ語やアラビア語でも正しく応答する
  • 日本語・タイ語・アラビア語での質問対応、メタデータとAI Profileの活用、COMMENT・ANNOTATIONS・Domainの違い
  • AIが正しく応答するには、メタデータの整備と業務用語の明確な定義が必須

@KJ /

データ基盤におけるデータ取り込み方式の選び方 —— ゼロコピー、CDC、Create or Replace、クエリベース増分更新

  • データ取り込み方式はゼロコピー、CDC、Create or Replace、クエリベース増分更新の4種類に分類される
  • ゼロコピーはソースを直接参照し、CDCは変更ログを捕捉し、Create or Replaceは全件洗い替え、クエリベース増分更新は差分抽出する
  • データ量やリアルタイム性、更新日時カラムの有無で方式を選択し、大規模なテーブルにはCDCやクエリベース増分更新が適する

@Yasutaka Kakoi /

若手社員がGoogle Cloud Next Tokyo 26に参加してきたよ!(DAY 2)

  • Google Cloud Next Tokyo 26でエージェント基盤やデータベース移行、ハイブリッドクラウド運用の実務的な話題が多かった
  • エージェントのA2UI、A2A、MCPプロトコル、Spannerの主キー設計、Kubernetesの環境差分対応
  • データベース移行時はアクセスパターンを考慮した主キー設計と、性能検証の工数を計画に含めることが必要

@zuma_75 /

Drizzleを使用したマイグレーション & DB操作 + drizzle-orm/zodによるバリデーション

  • Drizzle ORMとZodを用いてマイグレーション、CRUD、バリデーションを実装する方法を解説
  • schema.tsでテーブル定義し、drizzle-orm/zodでZodスキーマを自動生成、Server Actionでフォーム検証を実装
  • DBスキーマを正としてマイグレーション、バリデーション、CRUDで型の整合性を保つことが可能

@ながぬ~ /

Lakehouse と Warehouse に同じ SQL を投げてみる:書く場所と読む場所を分けて考える

  • Lakehouse は SQL 分析エンドポイントで SELECT は可能だが、INSERT と CREATE TABLE はエラーになる
  • Lakehouse は Spark でデータを処理し、T-SQL で書き込む Warehouse とは異なる
  • Lakehouse ではデータの書き込みが制限されており、Warehouse で T-SQL を使う必要がある

@st-1985 /

【ActiveRecord】CSV処理でメモリ使用量が増え続けた話

  • ActiveRecordのhas_many関連付け経由でレコードを作成するとメモリ使用量が増加した
  • buildメソッドで作成したオブジェクトが関連付けのtargetに追加され、逆関連付けの設定でbelongs_to側からも追加される
  • 関連付けを経由せずにモデルを直接インスタンス化することでメモリ使用量の増加を防げるが、逆関連付けの設定に注意が必要

@nyasuhiro /

OCI Base Database Service のリフレッシュ可能クローンを使ってOCPU環境からECPU環境へ移行してみた

  • OCPUベースのデータベースをリフレッシュ可能クローンでECPUベースに移行した
  • リフレッシュ可能クローンと通常PDBへの変換、データベース・リンク用ユーザーの作成が実施された
  • リフレッシュ可能クローンはMOUNTED状態でリフレッシュが必要で、通常PDBへの変換後にREAD WRITEになることが確認された

@Baba /

時系列予測の第一歩? OLTPとOLAP

  • OLTPとOLAPの違いと、分析用データベースの選定基準が説明されている
  • OLTPは行指向で正規化、OLAPは列指向で非正規化。同期方式はバッチ抽出、CDC、レプリケーション、アウトボックスパターンの4種類。保存先はPostgreSQLリードレプリカ、TimescaleDB、ClickHouse、Parquetファイルの4種類
  • 集計の速さは保存先の選定に大きく影響し、TimescaleDBが最も速かった。工数や鮮度に応じて同期方式と保存先を組み合わせる必要がある

@takeshi_Qiita /

【備忘録】Snowflake SQL Tips集

  • Snowflakeで会計年度の計算や、有効期間の条件付き結合、前年同月比の結合など、実務で役立つSQLのテクニックが紹介されている
  • 会計年度の計算にはSUBSTRINGとCASE、有効期間の条件にはEXISTSとCOALESCE、前年同月比にはDATEADDとLEFT JOINが使われている
  • 会計年度の計算や、有効期間の条件付き結合、前年同月比の結合など、実務で役立つSQLのテクニックが紹介されている

@KJ /

Delta LakeのMERGE INTOをOSSコードから読み解く —— ジョイン戦略とデータスキッピングの効き方

  • Delta LakeのMERGE INTOは2段階のジョインで実行され、DVの有効・無効で処理が大きく変わる
  • フェーズ1でファイルを絞り込み、フェーズ2で書き込み内容を計算。DV有効時は変更行だけを新規ファイルに、無効時は全ファイルを書き直す
  • ON句にターゲット側の列を使った絞り込み条件がないとデータスキッピングが効かず、パフォーマンスが低下する可能性がある

@Kotaro Chiba /

BOM表のデータ設計を考える

  • BOM表のデータ設計で関係テーブルが最有力案となった
  • 関係テーブルはFKやUNIQUE制約で資材間の関係を強制し、jsonbは柔軟性が高すぎる、グラフDBはコストがかかる
  • BOMの階層が10段まででRDBの再帰クエリで対応可能と判断し、グラフDBとの併用は運用コストが高いため見送り

@KantaUeda /

【SELECT AIの精度が出ない時に試したい5つのポイント】②SELECT AIにDBの意味を教える

  • SELECT AIの精度向上に向け、テーブル・カラムコメントやアノテーション、制約を活用する
  • テーブル・カラムコメントで業務上の意味を記述、26aiのアノテーションで名前付きメタデータを管理、主キー・外部キーでJOIN経路を定義
  • コメントとアノテーションに重複や矛盾を避けて業務定義の正本を明確にし、JOIN経路は主キー・外部キーで構造として定義する

@ISE_Db2LUW_Club /

【Db2 Genius Hub】導入前に知っておきたいサイジングの考え方 ~実環境から見積もってみた~

  • Db2 Genius Hubの導入に必要なサーバー容量とメモリの見積もり方法が示されている
  • PACKAGE_CACHEのユニークSQL数と収集間隔、sessionsの同時接続数と収集頻度、TABLEINDEXの索引数と収集間隔が計算式に含まれる
  • ユニークSQL数が10,000件以上の場合、3DBで43GB必要で収集を無効化するべき

@keikeigo /

Redisでポケモン図鑑のAPI呼び出しをキャッシュしたら、1000件取得が5.29秒から0.64秒になった【React/Hono/PokéAPI/Redis/Docker】

  • Redisキャッシュを導入することでポケモン図鑑の1000件取得処理が5.29秒から0.64秒に改善された
  • Redisでキャッシュを実装し、1000件のポケモンデータを並列リクエスト10件ずつで処理
  • Redisのキャッシュはメモリ使用で高速化に効果的だが、並列リクエストの件数制限を意識する必要がある