Google Cloud データの Cost Management への統合

手順

1. Red Hat Hybrid Cloud Console から、Settings Menu > Integrations をクリックします。
2. Settings ページの Cloud タブで、Add integration をクリックします。
3. Add a cloud integration ウィザードで、Google Cloud をクラウドプロバイダータイプとして選択し、Next をクリックします。
4. インテグレーションの名前を入力します。Next をクリックします。
5. Select application の手順で、Cost Management を選択し、Next をクリックします。

手順

1. Google Cloud Console で IAM & Admin → Create a Project をクリックします。
2. 表示される新しいページで Project Name を入力し、課金アカウントを選択します。
3. Organization を選択します。
4. Location ボックスに親組織を入力します。
5. Create をクリックします。

Cost Management の場合:

6. Project ページで、Project ID を入力します。
7. デフォルトのデータセットを Cost Management に送信する場合は、I am OK を選択します。
8. Next をクリックします。

手順

1. Google Cloud Console で、IAM & Admin → Roles をクリックします。
2. メニューから作成したプロジェクトを選択します。
3. + Create role をクリックします。
4. ロールの Title、Description、ID を入力します。この例では、customer-data-role を使用します。
5. + ADD PERMISSIONS をクリックします。

6. Enter property name or value フィールドを使用して、カスタムロールの以下の権限を検索して選択します。

   • bigquery.jobs.create
   • bigquery.tables.getData
   • bigquery.tables.get
   • bigquery.tables.list
7. Add をクリックします。
8. CREATE をクリックします。
9. Add a cloud integration ウィザードの Create IAM role ページで Next をクリックします。

Google Cloud Console で以下を行います。

1. IAM & Admin IAM をクリックします。
2. メニューから作成したプロジェクトを選択します。
3. Grant Access をクリックします。

4. 以下のプリンシパルを New principals フィールドに貼り付けます。

   billing-export@red-hat-cost-management.iam.gserviceaccount.com

5. Assign roles セクションで、Google Cloud Identity and Access Management ロールの作成 で作成した IAM ロール を割り当てます。この例では、customer-data-role を使用します。
6. SAVE をクリックします。

Cost Management では、以下のようになります。

1. Assign access ページで、Next をクリックします。

検証手順

1. IAM & Admin → IAM に移動します。
2. 新しいメンバーが正しいロールで存在することを確認します。

手順

1. Google Cloud Console で BigQuery をクリックします。
2. Explorer パネルで、作成したプロジェクトを選択します。
3. プロジェクト名のアクションアイコンをクリックします。
4. CREATE DATASET をクリックします。
5. Dataset ID 欄に、データセットの名前を入力します。この例では、CustomerData を使用します。
6. CREATE DATASET をクリックします。
7. Add a cloud integration ウィザードの Create dataset ページで、作成したデータセットの名前を入力します。
8. Next をクリックします。

手順

1. Google Cloud Console で Billing → Billing export をクリックします。
2. Billing export タブをクリックします。
3. Detailed usage cost セクションで EDIT SETTINGS をクリックします。
4. ドロップダウンメニューから、作成した Cost Management Project と Billing export dataset を選択します。
5. SAVE をクリックします。
6. Add a cloud integration ウィザードの Billing export ページで Next をクリックします。
7. Review details ページで、インテグレーションに関する情報を確認し、Add をクリックします。

検証手順

1. Detailed usage cost セクションにEnabled のチェックマークがあり、Project name と Dataset name が正しいことを確認します。

手順

1. Red Hat Hybrid Cloud Console から、Settings Menu > Integrations をクリックします。
2. Settings ページの Cloud タブで、Add integration をクリックします。
3. Add a cloud integration ウィザードで、Google Cloud をクラウドプロバイダータイプとして選択し、Next をクリックします。
4. インテグレーションの名前を入力します。Next をクリックします。
5. Select application の手順で、Cost Management を選択し、Next をクリックします。

手順

1. Google Cloud Console で IAM & Admin → Create a Project をクリックします。
2. 表示される新しいページで Project Name を入力し、課金アカウントを選択します。
3. Organization を選択します。
4. Location ボックスに親組織を入力します。
5. Create をクリックします。

Cost Management の場合:

6. Project ページで Project ID を入力します。
7. データを Red Hat に送信する前にデータをフィルタリングするように Google Cloud を設定するには、I wish to manually customize the data set sent to cost management を選択します。
8. Next をクリックします。

Google Cloud Console で以下を行います。

1. Cloud Storage → Buckets。
2. Create をクリックします。
3. バケット情報を入力します。バケットに名前を付けます。この例では、customer-data を使用します。
4. Create をクリックし、確認ダイアログで Confirm をクリックします。

Cost Management の場合:

5. Create cloud storage bucket ページで、Cloud storage bucket name を入力します。

手順

1. Google Cloud Console で、IAM & Admin → Roles をクリックします。
2. メニューから作成したプロジェクトを選択します。
3. + Create role をクリックします。
4. ロールの Title、Description、ID を入力します。この例では、customer-data-role を使用します。
5. + ADD PERMISSIONS をクリックします。

6. Enter property name or value フィールドを使用して、カスタムロールの以下の権限を検索して選択します。

   • storage.objects.get
   • storage.objects.list
   • storage.buckets.get
7. Add をクリックします。
8. CREATE をクリックします。
9. Add a cloud integration ウィザードの Create IAM role ページで Next をクリックします。

Google Cloud Console で以下を行います。

1. IAM & Admin IAM をクリックします。
2. メニューから作成したプロジェクトを選択します。
3. Grant Access をクリックします。

4. 以下のプリンシパルを New principals フィールドに貼り付けます。

   billing-export@red-hat-cost-management.iam.gserviceaccount.com

5. Assign roles セクションで、Google Cloud Identity and Access Management ロールの作成 で作成した IAM ロール を割り当てます。この例では、customer-data-role を使用します。
6. SAVE をクリックします。

Cost Management では、以下のようになります。

1. Assign access ページで、Next をクリックします。

検証手順

1. IAM & Admin → IAM に移動します。
2. 新しいメンバーが正しいロールで存在することを確認します。

手順

1. Google Cloud Console で BigQuery をクリックします。
2. Explorer パネルで、作成したプロジェクトを選択します。
3. プロジェクト名のアクションアイコンをクリックします。
4. CREATE DATASET をクリックします。
5. Dataset ID 欄に、データセットの名前を入力します。この例では、CustomerFilteredData を使用します。
6. CREATE DATASET をクリックします。
7. Add a cloud integration ウィザードの Create dataset ページで、作成したデータセットの名前を入力します。
8. Next をクリックします。

手順

1. Google Cloud Console で Billing → Billing export をクリックします。
2. Billing export タブをクリックします。
3. Detailed usage cost セクションで EDIT SETTINGS をクリックします。
4. ドロップダウンメニューから、作成した Cost Management Project と Billing export dataset を選択します。
5. SAVE をクリックします。
6. Add a cloud integration ウィザードの Billing export ページで Next をクリックします。
7. Review details ページで、インテグレーションに関する情報を確認し、Add をクリックします。
8. クラウド機能で使用できるように、source_uuid をコピーします。

検証手順

1. Detailed usage cost セクションにEnabled のチェックマークがあり、Project name と Dataset name が正しいことを確認します。

Google Cloud Console で以下を行います。

1. Security → Secret manager をクリックして、関数に認証情報を保存せずに Red Hat と関数を認証するシークレットを設定します。Secret Manager が有効になっていない場合は有効にします。

2. Secret Manager から、Create secret をクリックします。

   1. シークレットに名前を付け、サービスアカウント Client ID を追加し、Create Secret をクリックします。
   2. この手順を繰り返して、サービスアカウントのクライアントシークレットを保存します。
3. Google Cloud Console 検索バーで、functions を検索し、Cloud Functions 結果を選択します。
4. Cloud Functions ページで、Create function をクリックします。
5. 関数に名前を付けます。この例では、customer-data-function を使用します。
6. Trigger セクションで、トリガータイプとして HTTPS を選択します。

7. Runtime、build、connection、および security settings で、Security and image repo タブをクリックします。

   1. Add a secret reference をクリックします。
   2. 事前に作成した client_id シークレットを選択します。
   3. 参照メソッドを 環境変数として公開 するよう に設定します。
   4. 公開されている環境変数 client_id に名前を付けます。
   5. Done をクリックします。
8. client_secret に対して前の手順を繰り返します。
9. Next をクリックします。
10. Cloud Functions Code ページで、ランタイムを利用可能な最新の Python バージョンに設定します。

11. requirements.txt ファイルを開きます。ファイルの最後に次の行を貼り付けます。

    requests
    google-cloud-bigquery
    google-cloud-storage

12. Entry Point を get_filtered_data に設定します。

13. main.py ファイルを開きます。

    1. 以下の Python スクリプトを 貼り付けます。# Required vars to update とマークされたセクションの値を変更して、環境の値に更新します。以下の行の値を更新します。

       INTEGRATION_ID

       Cost Management integration_id

       BUCKET

       フィルタリングされたデータ GCP バケット

       PROJECT_ID

       プロジェクト ID

       DATASET

       データセット名

       TABLE_ID

       テーブル ID

14. Deploy をクリックします。

手順

1. 作成した関数の Trigger URL をコピーして、コストレポートを Post します。Google Cloud Scheduler に追加する必要があります。

   1. Google Cloud Console で、functions を検索し、Cloud Functions の結果を選択します。
   2. Cloud Functions ページで、関数を選択し、Trigger タブをクリックします。
   3. HTTP セクションで、Copy to clipboard をクリックします。
2. スケジューラージョブを作成します。Google Cloud Console で、cloud scheduler を検索し、Cloud Scheduler の結果を選択します。

3. Create job をクリックします。

   1. スケジューラージョブに名前を付けます。この例では、CustomerFilteredDataSchedule を使用します。
   2. Frequency フィールドに、関数を実行するタイミングの cron 式を設定します。この例では、0 9 * * * を使用して、関数を毎日 9 AM で実行します。
   3. タイムゾーンを設定し、Continue をクリックします。

4. 次のページで実行を設定します。

   1. Target type フィールドで HTTP を選択します。
   2. URL フィールドに、コピーした Trigger URL を貼り付けます。

   3. body フィールドに、関数に渡す以下のコードを貼り付けてトリガーします。

      {"name": "Scheduler"}

   4. Auth header フィールドで、Add OIDC token を選択します。
   5. Service account フィールドをクリックし、Create をクリックしてスケジューラージョブのサービスアカウントおよびロールを作成します。

5. Service account details ステップで、サービスアカウントに名前を付けます。この例では、scheduler-service-account を使用します。デフォルトの Service account ID を受け入れ、Create and Continue をクリックします。

   1. Grant this service account access to project フィールドで、最初のロールとして Cloud Scheduler Job Runner を検索して選択します。
   2. ADD ANOTHER ROLE をクリックしてから、Cloud Functions Invoker を検索して選択し ます。
   3. Continue をクリックします。
   4. Done をクリックして、サービスアカウントの作成を終了します。
6. Cloud scheduler タブに戻ります。
7. Configure the execution ページで Service account フィールドを選択します。
8. ページを更新して、作成したスケジューラーを選択します。
9. Continue をクリックしてから Create をクリックします。

手順

1. レポートを Post する関数を設定します。

   1. Cloud Functions から Create function を選択します。
   2. 関数に名前を付けます。
   3. HTTP トリガー を選択します。

2. Runtime で、build, connections, security settings で、Security をクリックします。

   1. Reference secret をクリックします。
   2. 環境変数として公開 を選択します。
   3. Secret version または Latest を選択します。
   4. Done をクリックします。
   5. 他のシークレットに対してプロセスを繰り返します。
3. Save をクリックします。
4. Trigger URL をコピーします。Next をクリックします。
5. 最新の Python ランタイムを選択します。
6. Entry point を get_filtered_data に設定します。
7. Google Cloud 機能 を追加します。INTEGRATION_ID、BUCKET、PROJECT_ID、DATASET、および TABLE_ID の値を更新します。

8. 以下の行からコメントを削除します。

    # month_end = now.replace(day=1) - timedelta(days=1) # delta = now.replace(day=1) - timedelta(days=query_range) # year = month_end.strftime("%Y") # month = month_end.strftime("%m") # day = month_end.strftime("%d")

9. requirements.py ファイルを選択し、requirements.txt ファイルから要件を追加します。
10. Deploy をクリックします。

11. 関数をトリガーするためにクラウドスケジューラーをセットアップします。

    1. Cloud Scheduler に移動します。
    2. Schedule a job をクリックします。
    3. スケジュールに名前を付けます。
    4. 頻度を設定します。たとえば、以下の cron は毎月 4 日にジョブを実行し、0 9 4 *
    5. タイムゾーン を設定します。
    6. Continue をクリックします。
    7. 以前にコピーした関数 Trigger URL を貼り付けます。
    8. リクエスト本文に {"name": "Scheduler"} を追加します。
    9. auth ヘッダーを OIDC トークン に設定します。
    10. Cloud Scheudler Job Runner および Cloud Functions Invoker ロールでサービスアカウントを選択または作成し ます。
    11. Continue をクリックします。
    12. Save をクリックします。