Google BigQuery - потоковые данные в BigQueryJAVA

Программисты JAVA общаются здесь
Ответить Пред. темаСлед. тема
Anonymous
 Google BigQuery - потоковые данные в BigQuery

Сообщение Anonymous »

Я использую Google BigQuery для моего проекта
прямо сейчас я пытаюсь вставить новую строку в BQ на основе этого https://cloud.google.com/bigquery/strea ... tream-mava написал/>

Код: Выделить всё

private void insertRowsToBQ(MyCustomObject data) {
String datasetName = "mydatasetname";
String tableName = "mytablename";
Map rowContent = new HashMap();
rowContent.put("field_1", data.getdata1());
rowContent.put("field_2", data.getdata2());
rowContent.put("field_3", data.getdata3());
rowContent.put("field_4", data.getdata4());

try {
BigQuery bigquery = BigQueryOptions.getDefaultInstance().getService();
TableId tableId = TableId.of(datasetName, tableName);
InsertAllResponse response =
bigquery.insertAll(
InsertAllRequest.newBuilder(tableId)
.addRow(rowContent)
.build());

if (response.hasErrors()) {
for (Map.Entry entry : response.getInsertErrors().entrySet()) {
Logger.error("Response error: \n" + entry.getValue());
}
}
Logger.info("Rows successfully inserted into table");
} catch (BigQueryException e) {
Logger.error("Insert operation not performed \n" + e.toString());
}
}
Код работает нормально, не получил никакого журнала ошибок
, но когда я пытаюсь просмотреть его в Google Console
https://console.cloud.google.com/bigque ... rojectName
>>>>select * from `myprojectname.mydatasetname.mytablename` where DATE(_PARTITIONTIME) = "2021-03-24"
< /code>
Данные на консоли Google BQ, данные не отображаются.
Оказывается, что данные задерживаются более 1 часа, пока их не смогут просмотреть на BQ < /p>
Это ожидается? Или есть какая -то проблема?>

Подробнее здесь: https://stackoverflow.com/questions/667 ... o-bigquery
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение
  • Google BigQuery - потоковые данные в BigQuery
    Anonymous » » в форуме JAVA
    0 Ответы
    3 Просмотры
    Последнее сообщение Anonymous
  • Потоковые данные Telnet отображаются в текстовом поле tkinter
    Гость » » в форуме Python
    0 Ответы
    27 Просмотры
    Последнее сообщение Гость
  • Потоковые данные Telnet отображаются в текстовом поле tkinter
    Anonymous » » в форуме Python
    0 Ответы
    21 Просмотры
    Последнее сообщение Anonymous
  • Как декодировать потоковые данные с помощью библиотеки ffmpeg
    Anonymous » » в форуме C++
    0 Ответы
    13 Просмотры
    Последнее сообщение Anonymous
  • Python запрашивает потоковые данные из API
    Anonymous » » в форуме Python
    0 Ответы
    14 Просмотры
    Последнее сообщение Anonymous

Вернуться в «JAVA»