目的:保存・検索する

大量データを集計・分析する

「GB〜TB級のログを集計したい」

この目的で選ぶときに見る軸

  1. スキャン量課金
  2. クエリ遅延
  3. 取り込み方法

下の表の「主要制約」は各ツールで最も先に当たる制約。軸ごとの値はツール詳細の制約表で確認する。

この目的に使える手段(2件)

大量データを集計・分析する を持つツールの比較
ツール分類種別学習料金成熟主要制約検証
DuckDB
1プロセスに組み込んで動く、列指向の分析(OLAP)用 SQL エンジン
データ処理・分析ツール無料安定同時アクセスの制限:書き込みできるプロセスは1つ。読み取り専用なら複数プロセスで開ける。同じ行を同時に変更するトランザクションは競合エラーになる
BigQuery
サーバーレスで TB 級のデータを SQL で集計する、Google Cloud のデータウェアハウス
データ処理・分析マネージドサービス無料枠あり安定オンデマンド課金の単価と最低課金:処理(スキャン)量 1 TiB あたり $6.25(料金ページの既定表示リージョン。リージョンで異なる)。毎月最初の 1 TiB は無料。1クエリあたり、および参照テーブルごとに最低 10 MB を課金。エラーになったクエリとキャッシュヒットは無課金