BufferedReader или Scanner?

Question

[Therapyx]

Доброго вечера. Достаточно прогуглил уже и нигде не нашел 1го конкретного мнения или приведенных конкретных чисел.
Что же все таки лучше использовать для считывания и сплита текстовых(к примеру CSV) фаилов огромного размера
Банальный пример кода:

String filePath = "C:/test.csv";
		InputStreamReader isr = new InputStreamReader(new FileInputStream(filePath), "UTF-8");
		BufferedReader br = new BufferedReader(isr);
		String line;
		while((line = br.readLine()) != null) {
			String[] splited = line.split("\t");
			for (int i = 0; i < splited.length; i++) {
				System.out.println(splited[i]);
			}
		}

Или же лучше будет со сканером? и почему?
п.с. К сожалению в ближайшие пару дней не буду располагать фаилами для тестов. Может кто-то уже это делал тут? :)

ОТВЕТ = Замерил даже с не очень большим фаилом. Получилось следующее
BufferedReader = 80 miliseconds
Scanner = 400 miliseconds.
В общем для парса больших данных ответ очевиден....

Comments

[sim3x]

не забудь, что производительность одинаковых методов на разных ОС может сильно различаться

Answer 1

[Александр Дорофеев]

Сейчас, по скорости они практически одинаковы.
Однако у Scanner есть методы useDelimiter(Pattern)иfindInLine(Pattern), которые позволяют моментально искать разделители, поэтому для
.csv файлов лучше использовать его.
А вообще, зачем изобретать велосипед, если есть замечательные
библиотеки Apache Commons CSV или opencsv?

Comments

[Therapyx]

Потому-что это все лицензии со своими подводными камнями :)
А так по сути много не надо. Есть CSV фаилы, которые можно открыть и посмотреть формат разделения, к примеру после трех табов надо достать даты, обработать и послать их летать дальше. С этой задачей справяться без проблем обе функции. И даже в удобности т доп. функциях я по сути не нуждаюсь.
Да и на худой конец, я же все таки должен чему-то учиться, а не брать все готовенькое =)

Answer 2

[Evhen]

Судя из исходников, Scanner-е есть буферизация + много удобных методов для чтения текста. Но вам никто не мешает сделать вот так

InputStreamReader isr = new InputStreamReader(new FileInputStream(filePath), "UTF-8");
    BufferedReader br = new BufferedReader(isr);

Scanner scanner = new Scanner(br);

Comments

[Therapyx]

Увы тут вопрос не в мешает(не мешает) а в производительности для огромного кол-ва данных ))

[Evhen]

Therapyx: BufferedReader быстрее, он просто читает символьный поток. В Scanner куча регулярок, который используются для проверки того, что сканер читает.

Но так как вы собираетесь читать *.CSV, и я так понимаю хотите понимать какой очередной тип данных вы собираетесь считать, то лучше использовать Scanner, а не писать что то свое

Answer 3

[asd111]

Самый быстрый способ парсить большие файлы - C++ boost memory maped file + парсер на boost spirit
https://habrahabr.ru/post/246257/

Comments

[Therapyx]

спс за статью, но тема про жаву.