• Необходимо скачать данные из таблицы хранящиеся в BigQuery (GCP). Запустить на каждую строчку данных определенный bash скрипт, сохранитъ преобразованные данные и положить в таблицу в BigQuery.

Предпочтительно чтобы код был написан на питоне в колабе (google collaboratory).

https://colab.research.google.com/notebooks/bigquery.ipynb

Поля исходной таблицы:
url, content, query_time, batch_number, meta
Content - поле, кoтopoe нeoбxoдимo тpaнcфopмиpoвaть.

Поля итоговой таблицы:
url, content, content_norm, query_time, batch_number, meta


Поле “контент” описывает картинку в формате svg.
Трансформация не влияет на визуальную картинку.
Для того, чтоб проверить не изменили ли вы данные, запустите команду:

display(SVG("image.svg"))
И
display(SVG("new_image.svg"))

Image.svg - файл до трансформации
New_image.svg - файл после трансформации

Результаты должны бытъ одинаковыми


вот небольшая выборка данных и пример SQL запроса на BQ:
SELECT * FROM for-ula.images_public.svgapi_100