Преобразовать данные хранящиеся в таблице в BigQuery

1 000 руб. за проект
21 февраля 2021, 23:02 • 5 откликов • 47 просмотров
  • Необходимо скачать данные из таблицы хранящиеся в BigQuery (GCP). Запустить на каждую строчку данных определенный bash скрипт, сохранитъ преобразованные данные и положить в таблицу в BigQuery.
Предпочтительно чтобы код был написан на питоне в колабе (google collaboratory).

https://colab.research.google.com/notebooks/bigquery.ipynb

Поля исходной таблицы:
url, content, query_time, batch_number, meta
Content - поле, кoтopoe нeoбxoдимo тpaнcфopмиpoвaть.

Поля итоговой таблицы:
url, content, content_norm, query_time, batch_number, meta


Поле “контент” описывает картинку в формате svg.
Трансформация не влияет на визуальную картинку.
Для того, чтоб проверить не изменили ли вы данные, запустите команду:

display(SVG("image.svg"))
И
display(SVG("new_image.svg"))

Image.svg - файл до трансформации
New_image.svg - файл после трансформации

Результаты должны бытъ одинаковыми


вот небольшая выборка данных и пример SQL запроса на BQ:
SELECT * FROM for-ula.images_public.svgapi_100




Отзывы
R50 30904a2a105a653aea3a01872a16ac1a
Заказчик
Всё сделал хорошо. Спасибо.
~ 3 года назад
R50 3a3d7a31606bdae1f0d29e65a945ad67
Фрилансер
 
~ 3 года назад