Большой запрос google: экспортировать таблицу в собственные ведра, что приводит к непредвиденной ошибке

Я застрял, пытаясь экспортировать таблицу в свой ковш Google Cloud Storage.

Пример идентификатора задания: job_0463426872a645bea8157604780d060d

Я пробовал цель облачного хранилища с большим количеством различных вариантов, все выявляют ту же ошибку. Если я попытаюсь скопировать отчет о наборе данных, он будет работать.

Что я делаю не так?

Благодаря!

Даниил

2
nl ja de
Какая ошибка?
добавлено автор jterrace, источник

3 ответы

It looks like the error says: "Table too large to be exported to a single file. Specify a uri including a * to shard export." Try switching the destination URI to something like gs://foo/bar/baz*

3
добавлено
это был один из вариантов для целевого местоположения, в котором я пытался. придумал ту же ошибку, хотя ...
добавлено автор dex, источник

Укажите расширение файла вместе с шаблоном. пример

gs://foo/bar/baz*.gz in case of GZIP (compressed)

gs://foo/bar/baz*.csv in case of csv (uncompressed)

Каталог foo - это имя ведра и каталог папок.   date в строковом формате, который может быть сгенерирован «на лету».

2
добавлено

Я смог сделать это с помощью:

bq extract --destination_format=NEWLINE_DELIMITED_JSON myproject:mydataset.mypartition gs://mybucket/mydataset/mypartition/{*}.json
0
добавлено
Google Cloud Platform_ru
Google Cloud Platform_ru
49 участник(ов)

Русскоязычное обсуждение google_cloud_pladform