Использование BufferedReader и FileReader для построчного считывания очень большого файла?

Question

[Iloveski]

Имеются файлы логов размерами от 1 до 15 гб каждый. Задача: построчно считывать файлы, если строка соответствует регулярке, пишем в бд. Насколько корректно использовать BufferedReader br = new BufferedReader(new FileReader(file)); для считывания из файла. Могут ли быть проблемы с памятью на файлах такого размера. Может есть способ лучше?

Comments

[Максим Мосейчук]

Посмотрите в сторону MappedByteBuffer

Answer 1

[Evhen]

Та норм будет. Сразу проверяйте считанную строку на условие и если подошло - добавляй в jdbc batch. Поставьте максимальное ограничение батча, например 200. Наполнился? - updateBatch, и дальше считывать строки.