BigQuery

Intelligence Agent for BigQueryに必要なCloudFormationテンプレート、Parameter Storeの情報、および取得するメタデータについて

CloudFormationテンプレート

テンプレートのご利用には、Quollio Data Intelligence Cloudへの事前登録が必要です。詳しくは、お問い合わせ | 株式会社Quollio Technologies ページよりご連絡ください。

※基盤環境は全てのAgentで共通して利用可能なため、すでに存在している場合は構築不要です。

※「QT」は会社としてのQuollio Technologies、「QDIC」は製品のQuollio Data Intelligence Cloudを指します。

Parameter Store一覧

パラメータストア名 概要
/quollio/company_id QTから提供されるCompany ID (テナントID)
/quollio/qdc_api_url Quollio External APIのURL
/quollio/bigquery/default/qdc_client_id QDIC側で発行したクレデンシャルのクライアントID
/quollio/bigquery/default/qdc_client_secret QDIC側で発行したクレデンシャルのクライアントシークレット
/quollio/bigquery/default/credentials GCPサービスアカウントのJSON文字列
/quollio/bigquery/default/gcp_project_id 対象のGCPプロジェクトID
/quollio/bigquery/default/gcp_regions 対象のGCPリージョン
 

実行コマンドと必要な権限

コマンド 実行内容 必要な権限
load_lineage lineageデータをQDICに反映します。

下記APIの権限がサービスアカウントに必要です。

  • BigQueryメタデータ閲覧者
  • データリネージ閲覧者

    リネージ描画の可能範囲

    上流(生成元) 下流(生成先) 描画の可否
    Table Table 可能
    Table View 可能
    View Table 可能
    View View 可能
    Table Column Table Column 不可
    Table Column View Column 不可
    View Column Table Column 不可
    View Column View Column 不可

     

    ソースコード

    Intelligence Agentの実際のソースコードやSQLについては、以下のレポジトリをご確認ください。