Ответ

Misha v.3 16.06.2010 17:06

кажется не на то обратили внимание:
Костя подсказывает, что между before load и after load съелось ~300 МБ. как такое может быть, если там всего-то загрузился 4-КБ файл? (или 200 файлов? да не суть, всё равно получается 800 КБ, а не 300 МБ)

Проблема/непонимание работы сборщика мусора или утечка памяти, nkostya 16.06.2010 10:46
- Что-то много памяти расходуется ..., moko [M] 16.06.2010 16:11
  - Ответ, nkostya 16.06.2010 16:27
    - Ответ, Misha v.3 [M] 16.06.2010 17:06
      - Загружается 1 файл (-), nkostya 16.06.2010 20:01
      - Ответ, nkostya 16.06.2010 19:58
        думаю, что тут проблема в xpath, Misha v.3 [M] 17.06.2010 02:21 / 17.06.2010 04:02
        Ответ, Vint 16.06.2010 22:20
        Т.е. вы предлагаете XSLT трансформацией в некий tab-delimited формат а потом парсером? Быстрее будет? (-), nkostya 16.06.2010 22:59
        tab-delimited можно и сразу в базу через LOAD DATA (-), Maxx [M] 17.06.2010 00:32
        В моем случае LOAD DATA не поможет, т.к. много операций по подготовке данных и без них не обойтись :( (-), nkostya 17.06.2010 16:51
        Именно, Vint 16.06.2010 23:05
        process быстрее будет чем чтение tab-delimited? (-), nkostya 17.06.2010 16:48
        с tab-delimited у вас тоже будут небольшие проблемы..., Misha v.3 [M] 18.06.2010 08:11
        Но в любом случае xslt будет быстрее и по памяти нормально, Vint 18.06.2010 14:05
        не уверен, Vint 17.06.2010 22:32
        http://api.twitter.com/1/statuses/user_timeline.xml?count=200&user_id=12 - без регистрации в API и на сайте (-), nkostya 16.06.2010 22:51
        Так, я сам нашёл пароль:-), Vint 16.06.2010 22:44
        Мало итераций, nkostya 16.06.2010 22:53
        Ответ, Vint 16.06.2010 23:04
        аналогично, Misha v.3 [M] 17.06.2010 03:14 / 17.06.2010 03:43
        Ответ, Vint 17.06.2010 03:49
        локальный result сразу выкидывает все whitespace, Misha v.3 [M] 17.06.2010 04:00 / 17.06.2010 04:51
- Ответ, Misha v.3 [M] 16.06.2010 11:08
  - Ответ, nkostya 16.06.2010 11:20
    - Ответ, Misha v.3 [M] 16.06.2010 11:39

Новости	FAQ	Авторы	Документация	В действии	Библиотека
Инструменты	Полезные ссылки	Хостинги	Скачать	Примеры	Форум