Обработка большого объема данных
virusav 10.05.2012 13:10
Здравствуйте.
Есть файл размером примерно 200 мб в текстовом формате.
Использую регулярку, которая создает таблицу с большим количеством строк (1393105).
Если крутить таблицу через menu и никаких действий внутри не делать, то все сравнительно быстро отрабатывает, но при попытке обработать внутри цикла данные получаю ошибку переполнения памяти.
Пробовал преобразовывать таблицу к хешу, а потом прокручивать его, но при обработке данных та же ошибка.
При использовании ^memory:compact[] так и не дождался результата, т.к. процесс бесконечный.
Есть ли какие-нибудь параметры конфига или хитрости, с помощью которых можно прокрутить получившуюся таблицу, обработать данные построчно и при этом не получить ошибку переполнения?
- Обработка большого объема данных, virusav 10.05.2012 13:10
- Ответ, virusav 16.05.2012 11:28
- Ответ, virusav 14.05.2012 18:07
- а пример данных можно глянуть, вместе с регуляркой? (-), 10.05.2012 16:17
- Ответ, virusav 10.05.2012 16:49
- Ответ, Maxx [M] 11.05.2012 11:32
- Ответ, virusav 11.05.2012 11:52
- Да уж..., MoKo 10.05.2012 13:36
- Ответ, virusav 10.05.2012 13:48 / 10.05.2012 14:05
- Ответ, MoKo 10.05.2012 14:56
- Ответ, virusav 10.05.2012 14:58