Реактивное программирование на Java — извлекайте страницы одну за другой и обрабатывайте каждую страницу параллельно.JAVA

Программисты JAVA общаются здесь
Ответить Пред. темаСлед. тема
Anonymous
 Реактивное программирование на Java — извлекайте страницы одну за другой и обрабатывайте каждую страницу параллельно.

Сообщение Anonymous »

Я хочу перебрать результаты запросов к базе данных, которые разбиты на страницы, и обработать каждую страницу. Обработка каждой страницы должна происходить параллельно, и следующая страница не будет загружена до завершения обработки текущей страницы.
Изменить:
Страницы извлекаются последовательно. , но обработка каждого элемента на странице должна происходить параллельно
Сейчас у меня есть что-то вроде этого:

Код: Выделить всё

Flux.generate( () -> 0, (pageNum, sink) -> {
boolean success = fetchAndProcessPage(pageNum);
if(isLastPage()){
sink.complete()
}
return pageNum +1;
});

boolean fetchAndProcessPage(int pageNum) {
return Flux.fromIterable(getPage(pageNum).getContent())
.parallel()
.runOn(Schedulers.parallel())
.map(this::processItem)
.sequential()
.collectList()
.map( list -> list.stream().allMatch(success -> success)
.block()
}
Это упрощенная версия кода, но она представляет ту же реактивную последовательность.
Моя проблема с этим кодом заключается в том, что fetchAndProcessPage запускается внутри метода генерации и использует блок( ), чтобы завершить обработку страницы.
Есть ли более элегантный способ сделать это без использования блока в fetchAndProcessPage?

Подробнее здесь: https://stackoverflow.com/questions/784 ... ge-in-para
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение

Вернуться в «JAVA»