Добавление шага выполнения SQL после WriteToBigQuery Apache Beam Python ⇐ Python

[Anonymous]

Команда,
Ищу мнение экспертов по Apache Beam!
У меня есть конвейер потоковой передачи данных Python, который использует WriteToBigQuery после чтения из исходного источника. Я хочу добиться двух целей после шага WriteToBigQuery: 1. обработки записей об ошибках WriteToBigQuery и 2. выполнения еще одного большого SQL-запроса, который должен выполняться только после WriteToBigQuery.
Для второго требования: я знаю, что WriteToBigQuery считается приемником, но я хотите выполнить немедленную операцию, которая выполняет один большой запрос SQL. Если возможно, предложите обходные пути.
Спасибо

Подробнее здесь: https://stackoverflow.com/questions/791 ... eam-python