Можно сделать чтение со страницы в несколько потоков??

Question

[artshelom]

Задался вопросом, можно ли сделать чтение со страницы в несколько потоков??
Например:

public StringBuffer getQuery(String urlToRead) {
        URL url;
        HttpURLConnection conn;
        BufferedReader rd;
        String line;
        StringBuffer result = new StringBuffer();
        try {
            url = new URL(urlToRead);
            conn = (HttpURLConnection) url.openConnection();
            conn.setRequestMethod("GET");
            rd = new BufferedReader(new InputStreamReader(conn.getInputStream()));
            while ((line = rd.readLine()) != null) {
                result.append(line);
            }
            rd.close();
        } catch (Exception e) {
            getQuery(urlToRead);
            e.printStackTrace();
        }
        return result;

вот код на java, если к нему обращаться из нескольких потоков, будет ли потеря пакетов и другие ужасные вещи??

Если будет, то как можно решить данную проблему??

Comments

[Денис Загаевский]

Задача-то какая стоит?

[artshelom]

Заходить на сайты и парсить их

Answer 1

[Dmitry Roo]

"можно ли сделать чтение со страницы в несколько потоков?" - на счет этого стоит подумать еще до написания кода.
Предположим у вас есть книга, и вы решили ее читать одновременно какой-то компанией. Как бы вы это организовали?
Первое, что приходит в голову - найти ответственного "диспетчера", который будет выдавать порции страниц каждому участнику.
Но что, если книга не разделена на страницы? Как ее делить тогда? Получается, нужно чтобы вначале ее кто-то прочитал, потом поделил, потом уже раздал части. Но зачем тогда читать уже прочитанную книгу (если, конечно, цель только в самом факте чтения)?

Comments

[artshelom]

Я понял аналогию.
Но ведь браузеры могут одновременно загружать несколько страниц.
Такое разве сделать нельзя?

[Dmitry Roo]

Можно, конечно. И аналогия тут прямая: мешают ли люди читать друг-другу в библиотеке?

В общем и целом, проблема многопоточности проявляется в совместном доступе к _одному_ ресурсу, при чем только в записи. Т.е. если ваши читатели будут писать отчет в одну книгу - надо будет организовывать какую-то очередь (блокировку), либо сделать несколько маленьких книжечек, которые скрепляются в одну (конкурентные коллекции).

[artshelom]

Dmitry Roo: А если, программа будет в несколько потоков ходить по сайтом(они будут не связаны), то так можно оставить??

[Dmitry Roo]

да! Даже если по одной и той же странице будут ходить - проблем быть не должно.

[artshelom]

Благодарю!