Metadata Agent for BigQueryに必要なCloudFormationテンプレート、Parameter Storeの情報、および取得するメタデータについて
CloudFormationテンプレート
CloudFormationテンプレートのご利用には、Quollio Data Intelligence Cloudへの事前登録が必要です。詳しくは、お問い合わせ | 株式会社Quollio Technologies ページよりご連絡ください。
※基盤環境は全てのAgentから共通で使用するため、すでに存在している場合は構築不要です。
※「QT」は会社としてのQuollio Technologies、「QDIC」は製品のQuollio Data Intelligence Cloudを指します。
Parameter Store一覧
| パラメータストア名 | 概要 |
|---|---|
| /quollio/company_id | QTから提供されるCompany ID |
| /quollio/bigquery/default/credentials | BigQueryにアクセスするためのサービスアカウントキー（JSONデータ） |
アセット種別の対応関係
| Google BigQuery | Quollio Data Intelligence Cloud |
|---|---|
| Project | Schema（スキーマ） |
| Dataset | Schema（スキーマ） |
| Table | Table（テーブル） |
| Column | Column（カラム） |
取得するメタデータ
| APIリクエスト | 取得するメタデータ |
|---|---|
| datasets.list | datasets[].id |
| datasets.get |
id description |
| tables.list | tables[].id |
| tables.get |
id description numBytes numRows schema.fields[].name schema.fields[].description |
| INFORMATION_SCHEMA | 取得するメタデータ |
|---|---|
| INFORMATION_SCHEMA.TABLES |
table_name ddl |