parser

Написать ответ на текущее сообщение

 

 
   команды управления поиском

Ответ

Aaron 20.04.2010 20:40

Смысл не в получении ответа 200 ОК - это можно сделать и HEAD'ом.

Смысл в загрузке первого килобайта странички, чтобы вытащить оттуда <title></title> и всё!

В текущей реализации (без лимита) на загрузку по http:// парсер качает всю страницу целеком (сорс ессесно), а бывают странички и по 300 кб и по 700...