このドキュメントでは、Dataplex Universal Catalog に適用される割り当てについて説明します。
Google Cloud では、割り当てを使用して公平性を確保し、リソースの使用量と可用性の急増を抑えます。割り当ては、 Google Cloud プロジェクトで使用できるGoogle Cloud リソースの量を制限します。割り当ては、ハードウェア、ソフトウェア、ネットワーク コンポーネントなど、さまざまなリソースタイプに適用されます。たとえば、割り当てによって、サービスへの API 呼び出しの数、プロジェクトで同時に使用されるロードバランサの数、作成可能なプロジェクトの数を制限できます。割り当てを適用することで、サービスの過負荷を防ぎ、Google Cloud ユーザーのコミュニティを保護します。割り当ては、自組織で使用している Google Cloud リソースの管理にも役立ちます。
Cloud Quotas システムは次のことを行います。
- Google Cloud のプロダクトとサービスの消費量をモニタリングする
- これらのリソースの消費量を制限する
- 割り当て値の変更をリクエストし、割り当ての調整を自動化する手段を提供する
ほとんどの場合、割り当ての許容量を超えるリソースを消費しようとすると、システムによってリソースへのアクセスがブロックされ、実行しようとしているタスクは失敗します。
割り当ては通常、 Google Cloud プロジェクト レベルで適用されます。あるプロジェクトでリソースを使用しても、別のプロジェクトで使用可能な割り当てに影響することはありません。 Google Cloud プロジェクト内では、すべてのアプリケーションと IP アドレスで割り当てが共有されます。
詳細については、Cloud Quotas の概要をご覧ください。
Dataplex Universal Catalog リソースにはシステムの上限もあります。システムの上限は変更できません。
Dataplex Universal Catalog では、特定の期間中に API リクエストの数と、プロジェクトで作成できるリソースの数に割り当てが適用されます。割り当てによって、予期しない使用量の急増とサービスの過負荷を防ぎます。詳しくは、割り当てが適用される理由をご覧ください。
Dataplex Universal Catalog をより多く使用するにつれて、割り当てのニーズが増える場合があります。割り当てがニーズを満たすには少なすぎる、または使用量の今後の増加が想定される場合は、事前に割り当ての増加をリクエストできます。
Dataplex API リクエストの割り当て
Dataplex API は、送信元に関係なく、Dataplex Universal Catalog のリソース管理リクエストと検索リクエストにさまざまなレベルで割り当てを適用します。これには、直接 API 呼び出し、クライアント ライブラリ、Google Cloud CLI、 Google Cloud コンソールから発信されたリクエストが含まれます。
Dataplex Universal Catalog リクエストには、次の割り当てが適用されます。
| 割り当て | デフォルト |
|---|---|
| 1 分、1 リージョン、1 プロジェクトあたりのエントリとアスペクトの読み取りリクエスト数 | 6000 |
| 1 分、1 リージョン、1 プロジェクトあたりのエントリとアスペクトの書き込みリクエスト数 | 1500 |
| 1 分、1 ユーザー、1 プロジェクトあたりのアスペクト タイプ、エントリタイプ、エントリ グループの読み取りリクエスト数 | 100 |
| 1 分、1 プロジェクトあたりのアスペクト タイプ、エントリタイプ、エントリ グループの読み取りリクエスト数 | 200 |
| 1 分、1 ユーザー、1 プロジェクトあたりのアスペクト タイプ、エントリタイプ、エントリ グループの書き込みリクエスト数 | 10 |
| 1 分、1 プロジェクトあたりのアスペクト タイプ、エントリタイプ、エントリ グループの書き込みリクエスト数 | 20 |
| 1 分、1 ユーザー、1 プロジェクトあたりの検索リクエスト数 | 900 |
| 1 分、1 プロジェクトあたりの検索リクエスト数 | 1200 |
| 1 分、1 組織あたりの検索リクエスト数 | 2400 |
| 1 日、1 組織あたりの検索リクエスト数 | 345600 |
| 1 分、1 リージョン、1 プロジェクトあたりのメタデータ ジョブの読み取りリクエスト数 | 400 |
| 1 分、1 リージョン、1 ユーザー、1 プロジェクトあたりのメタデータ ジョブの読み取りリクエスト数 | 200 |
| 1 分、1 リージョン、1 プロジェクトあたりのメタデータ ジョブの書き込みリクエスト数 | 20 |
| 1 分、1 リージョン、1 ユーザー、1 プロジェクトあたりのメタデータ ジョブの書き込みリクエスト数 | 10 |
| メタデータ エクスポート ジョブによってエクスポートされるメタデータの量（組織ごと、1 日あたり） | 10 GB |
|
メタデータ エクスポート ジョブによるエクスポートでスキャンされるメタデータの量（組織ごと、1 日あたり） この割り当てでは、メタデータ エクスポート ジョブのスコープ内の組織、プロジェクト、エントリ グループに存在するメタデータの合計量が評価されます。 |
100 GB |
次の表に示す Dataplex Universal Catalog リクエストごとに、プロジェクトあたり、およびユーザーあたりプロジェクトあたりの両方のレベルで割り当てが適用されます。
| 割り当て | 例 |
|---|---|
| リソース管理の読み取りリクエスト | レイクの取得、ゾーンの一覧表示 |
| リソース管理の書き込みリクエスト | レイクの作成、アセットの削除 |
| メタデータのリクエストの取得 | エンティティの取得、パーティションの取得 |
| メタデータの一覧表示リクエスト | エンティティの一覧表示、パーティションの一覧表示 |
| メタデータの書き込みリクエスト | エンティティの更新、パーティションの削除 |
| タスクとジョブのリソースの読み取りリクエスト | タスクの取得、ジョブの一覧表示 |
| タスクとジョブのリソースの書き込みリクエスト | タスクの作成、ジョブのキャンセル |
| IAM ポリシー リクエストの設定 | IAM ポリシーの設定 |
Data Lineage API リクエストの割り当て
Data Lineage API では、次の割り当てが適用されます。
- データを返すだけの読み取りリクエスト
- データを作成または変更する書き込みリクエスト
- オープン リネージの作成
データリネージ リクエストには、次の割り当てが適用されます。
| 割り当て | デフォルト値 |
|---|---|
| 1 分、1 リージョン、1 ユーザー、1 プロジェクトあたりの読み取りリクエスト数 | 1000 |