Node.jsでSearch Console URL Inspection APIをローカルで実行してインデックスステータス分析の結果をCSV化する

require('dotenv').config(); // .envファイルを環境変数として読み込み
const fs = require('fs');
// Google APIs Node.js Client 読み込み
const { google } = require('googleapis');

// URL一覧ファイル名
const urlsFile = './site-urls.txt';
// 保存ファイル名
const fileName = 'inspections.csv';

// CSVヘッダー
const headers = [
  'url',
  'message',
  'verdict',
  'coverageState',
  'robotsTxtState',
  'indexingState',
  'lastCrawlTime',
  'pageFetchState',
  'googleCanonical',
  'userCanonical',
  'sitemap',
  'referringUrls',
  'crawledAs',
];

// Search Console URL Inspection APIの呼び出し関数
async function inspectURL(siteUrl, searchConsole) {
  const response = await searchConsole.urlInspection.index.inspect({
    requestBody: {
      inspectionUrl: siteUrl,
      siteUrl: siteUrl,
      languageCode: 'ja_JP',
    },
  });
  return response.data;
}

// 実行関数
async function runIsnspectUrls() {
  // Google認証の初期化
  const auth = new google.auth.GoogleAuth({
    keyFile: process.env.GOOGLE_APPLICATION_CREDENTIALS,
    scopes: ['https://www.googleapis.com/auth/webmasters.readonly'],
  });
  const authClient = await auth.getClient();
  google.options({ auth: authClient });
  // Search Consoleライブラリの読み込み
  const searchConsole = google.searchconsole('v1');
  const results = [];
  // url一覧ファイルの読み込み
  const text = fs.readFileSync(urlsFile);
  for (const line of text.toString().split('\n')) {
    const url = line.trim();
    if (url) {
      try {
        // Search Console URL Inspection APIの呼び出し
        const data = await inspectURL(url, searchConsole);
        // 結果からindexStatusResultを取り出し
        results.push(Object.assign({url, message: 'success'}, data.inspectionResult.indexStatusResult));
      } catch (error) {
        results.push({url, message: '"' + error.errors[0].message + '"'});
      }
    }
  }
  // CSVファイルへ書き出し
  // ヘッダー書き出し
  fs.writeFileSync(fileName, headers.join(',') + '\r\n');
  for (const result of results) {
    const columns = [];
    for (const head of headers) {
      let columnData = result[head] || '';
      if (Array.isArray(columnData)) {
        // 配列の場合は結合し、ダブルクォートでくくる
        columnData = '"' + columnData.join(',') + '"';
      }
      columns.push(columnData);
    }
    fs.appendFileSync(fileName, columns.join(',') + '\r\n');
  }
}

// 実行
runIsnspectUrls();