BigQuery の 外部テーブルに GCS 使おうとして location でダメだった

<p>先に結論</p>
<ul>
<li>Cloud Storage には <code>asia</code> ロケーションがある</li>
<li>BigQuery には <code>asia</code> ロケーションがない</li>
<li>BigQuery はロケーションが違うオブジェクトを外部テーブルにはできない</li>
</ul>
<h2>経緯</h2>
<p>GCS に置いてある CSVファイルを BigQuery の 外部テーブルとしてロードしようとしたが、以下のエラーが返された。</p>
<blockquote>
<p>Cannot read and write in different locations: source: asia, destination: asia-northeast1</p>
</blockquote>
<p>なお、それぞれのロケーションはこんな感じだった。</p>
<ul>
<li>Cloud Storage: <code>asia</code> (Multi Region)</li>
<li>BigQuery: <code>asia-northeast1</code></li>
</ul>
<h2>原因</h2>
<p>Multi Region についてよく分かってなかったが、<code>asia</code> と <code>asia-northeast1</code> では当然違うロケーション扱いになるようだ。BigQuery はロケーションの違うオブジェクトを外部テーブルとしてくれないのでダメである。</p>
<p>まだ BigQuery にはデータは入れてなかったので、BigQuery のロケーションを <code>asia</code> に移動しようとしたが、BigQuery ではまだ <code>asia</code> が用意されていなかった。どうやら現状だと Cloud Storage のロケーションを変えないとダメなようだ...</p>


BigQuery の 外部テーブルに GCS 使おうとして location でダメだった

経緯

原因

BigQuery の外部テーブルに GCS 使おうとして location でダメだった