|
|
Регистрация Восстановить пароль |
Повторная активизация e-mail |
Регистрация | Задать вопрос |
Заплачу за решение |
Новые сообщения |
Сообщения за день |
Расширенный поиск |
Правила |
Всё прочитано |
|
Опции темы | Поиск в этой теме |
16.09.2012, 14:12 | #1 |
Заслуженный флудер
Участник клуба
Регистрация: 31.03.2010
Сообщений: 1,473
|
Подгрузка файла частями
Здравствуйте. Есть текстовый файл весом 1-10 гб.
Как его можно подгружать частями? например загрузить в List<string> 500 000 строк, использовать, загрузить следующие 500 000 и тд. Буду благодарен за любой совет |
16.09.2012, 14:44 | #2 |
Белик Виталий :)
Старожил
Регистрация: 23.07.2007
Сообщений: 57,097
|
Загружай в массив символов скажем по мегабайту. После отсекай все что после последнего символа CR, дабы так сказать выйти на точку следующей загрузки.
После Split-уй на строки (это же шарп ) Ну и так далее - залил массив символов - отсплитовался - обработал
I'm learning to live...
|
16.09.2012, 15:14 | #3 |
Форумчанин
Регистрация: 21.01.2009
Сообщений: 719
|
асинхронная загрузка поможет отцу русской демократии)
Изобретатель велосипедов
|
16.09.2012, 15:24 | #4 |
Заслуженный флудер
Участник клуба
Регистрация: 31.03.2010
Сообщений: 1,473
|
Нужно чтобы не приходилось грузить весь файл в память ( 5 гб ), даже на короткое время.
|
16.09.2012, 16:50 | #5 |
Белик Виталий :)
Старожил
Регистрация: 23.07.2007
Сообщений: 57,097
|
Ну дык я и предлагаю грузить порциями, и порции же и обрабатывать
Иногда сам так и делаю.
I'm learning to live...
|
17.09.2012, 04:14 | #6 |
Старожил
Регистрация: 28.01.2009
Сообщений: 21,000
|
StreamReader итак же позволяет читать строки, задать просто размер буфера побольше стандартного чтоб реже дергать файл.
Хорошо поставленный вопрос это уже половина ответа. | Каков вопрос, таков ответ.
Программа делает то что написал программист, а не то что он хотел. Функции/утилиты ждут в параметрах то что им надо, а не то что вы хотите. |
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Реализация идеи. подгрузка из файла | mirоtvorec | C++ Builder | 3 | 20.06.2012 11:04 |
передача файла частями TcpServer TcpClient | Alexandr555 | Работа с сетью в Delphi | 7 | 02.01.2012 18:04 |
подгрузка картинки | bloger | PHP | 1 | 07.11.2011 14:13 |
Передавать файл через сокет частями | NieL | Работа с сетью в Delphi | 0 | 08.12.2009 16:42 |
GDI+.Увеличение масштаба на дробную величину. Проблемы с дробными частями коордиат | akolit | Win Api | 0 | 13.02.2009 18:02 |