Геоинформационные системы (ГИС) и Дистанционное зондирование Земли
https://gis-lab.info/forum/
проблема в Виндовс и ее адресации памяти, я уверен что на линуксе проблем обработки нет (пока длинна вектора не превысит указанное предельное значение). Если выложите отлаженный тест целиком, или процедуру для файлов Ландсата которые я могу скачать из указанной выше папки на ftp, готов провести эксперимент на 32 и 64 разрядной машине (у меня из софта R с rgdal и GRASS установлены, виндовса нет вообщеАнна писал(а):может переадресовать этот вопрос разработчикам на самом сайте R? я думаю люди они открытые для взаимодействия и все прояснят. вряд ли мы первые кто столкнулся с обработкой больших объемов данных в R
.> getRasterTable(x, region.dim = c(5000,5000))sim писал(а):Спрашивать на форуме смысла особого нет, они так и скажут - ограничение памяти, с этим все понятно и написано во многих местах, задача как я понимаю - определить практический порог.
ощущаешь себя кочегаром подкидывающим своп файлы в топку ) трижды не угадал нужный размер свопа, завтра сделаю сразу 10 гиг и посмотрю что случится... но похоже никаких лимитов (?кроме длинны вектора?) действительно нет.
на работе есть новый комп и пару сата винтов дополнительных попробую собрать на машинке параллельный своп на 3 сата диска...Код: Выделить всё
[Загружено ранее сохраненное рабочее пространство]
> gc()
used (Mb) gc trigger (Mb) max used (Mb)
Ncells 135041 3.7 350000 9.4 350000 9.4
Vcells 89254 0.7 786432 6.0 495180 3.8
>
> imagedata1 = data.frame(getRasterTable(x))
Ошибка: не могу разместить вектор размером 266.1 Mb
> getRasterTable(x, region.dim = c(2900,2900))
...
33333 414945.8 4893379 0
[ достигнута getOption("max.print") -- пропущено 8376667 строк ]]
> gc()
used (Mb) gc trigger (Mb) max used (Mb)
Ncells 263884 7.1 8696245 232.3 8680195 231.8
Vcells 27427201 209.3 135692462 1035.3 166198154 1268.0Код: Выделить всё
Error: cannot allocate vector of size 98.9 MbКод: Выделить всё
> memory.size()
[1] 1208.65
> memory.limit()
[1] 1535Код: Выделить всё
memory.limit(size = 3000)
memory.limit()Вот тут кое-что по теме (пакет "raster"). Сам сабж не использовал, но пишут, что должен работать в том числе с очень большими растрами.rhot писал(а):Прошло уже около двух лет с момента последнего поста - поменялась ли ситуация с растрами в R?