С каким объемом данных работаешь

Обычно работаю с данными от нескольких мегабайт до десятков гигабайт. Для обработки больших объемов использую:

• Stream API для ленивой обработки без загрузки всего в память
• Batch-обработку (пачками)
• Кэширование (Caffeine, Ehcache)
• При необходимости - распределенные системы (Hadoop, Spark)

Пример потоковой обработки:

Files.lines(Paths.get("large_file.txt"))
     .parallel()
     .filter(line -> line.contains("error"))
     .forEach(System.out::println);