Страница 1 из 1

Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 07 май 2018, 18:34
rhot
Какой геокодер бесплатно сможет обработать 55К+ адресов в день?
У Google лимит в 2500 запросов/день. У Yandex немного лучше - 25000. Лимит у Nominatim не понятен.

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 07 май 2018, 18:43
gamm
плодим ботов с разными IP через VPN и прочие анонимайзеры ... трех ботов достаточно

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 07 май 2018, 20:01
trir

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 08 май 2018, 10:19
rhot
Про костыли типа собственного сервера и ботов я знаю. Контекст вопроса иммено в бесплатном геокодировании 55К адресов/день с наименьшими затратами.

Пока решил с помощью связки Yandex Geocoder API и Nominatim API. Задача решается за 17 часов. 8)

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 08 май 2018, 20:47
jerry-maori
у яндекса (и у гугла) вроде ещё в правилах пользования есть лимиты на то, где полученные результаты можно использовать...

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 08 май 2018, 21:23
freeExec
Нигде, кроме их API, и хранить нельзя. Но кто использует VPN и ботов против технических ограничений, думаете заботят такие формальные ограничения?

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 08 май 2018, 21:39
jerry-maori
ну и я к тому, что единственное (имхо) технически и юридически верное решение -- своё сервер nominatim ( с учётом того, что единственная "чистая" картооснова -- тот же OSM, решение более чем осмысленное)
тот же postgres в плане тюнинга производительности -- блин поле широчайшее...
по поводу 55к запросов -- ну блин, истансы в облаках как бы не вот сотни нефтей строят.

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 08 май 2018, 22:31
rhot
jerry-maori писал(а):
08 май 2018, 21:39
единственное (имхо) технически и юридически верное решение -- своё сервер nominatim
Ну, или запросы каждые 2 секунды слать через Nominatim.
freeExec писал(а):
08 май 2018, 21:23
Нигде, кроме их API, и хранить нельзя.
Это да, Яндекс только кэшировать до 30 дней разрешает, и то только в особых случаях. Для хранения и обработки данных лучше варианта, чем Nominatim не найти.

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 10 май 2018, 15:34
novia
rhot писал(а):
07 май 2018, 18:34
Какой геокодер бесплатно сможет обработать 55К+ адресов в день?
rhot писал(а):
08 май 2018, 22:31
Ну, или запросы каждые 2 секунды слать через Nominatim.
24*3600/2 = 43200 адресов в nominatim в день, если таймаут 2 секунды

опытным путем выяснено, что публичный номинатим банит на сутки после 1500-3000 запросов, если без секундных таймаутов. через сутки бан убирают.

если качество геокодирования по OSM устраивает, проще потратить время на поднятие своего nominatim
rhot писал(а):
07 май 2018, 18:34
У Yandex немного лучше - 25000
можно и больше, если осторожно. но, конечно, стоит соблюдать правила использования сервиса, а то прикроют как росреестр

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 10 май 2018, 15:57
freeExec
novia писал(а):
10 май 2018, 15:34
а то прикроют как росреестр
А у того тоже есть свой геокодер ;)

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 10 май 2018, 16:16
rhot
freeExec писал(а):
10 май 2018, 15:57
А у того тоже есть свой геокодер ;)
А какой у них?

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 10 май 2018, 17:15
freeExec
rhot писал(а):
10 май 2018, 16:16
А какой у них?
· сервис геокодирования Адреса ГКН © Росреестр 2016;
· сервис геокодирования Адреса OSM © Росреестр 2016, © Участники OpenStreetMap;
· сервис геокодирования Адреса ESRI © esri;

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 15 май 2018, 09:56
novia
novia писал(а):
10 май 2018, 15:34
а то прикроют как росреестр
freeExec писал(а):
10 май 2018, 15:57
А у того тоже есть свой геокодер
в данном случае я имел в виду защиту от DDOS, водруженную на их сервисы после того, как народ начал массово забирать информацию по ЗУ и прочим объектам
.

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 16 май 2018, 08:32
voltusya
Попался полезный ресурс на тему выбора геокодера:
https://stevage.github.io/which-geocoder/

Re: Какой геокодер сможет обработать 55К+ адресов?

Добавлено: 16 май 2018, 09:58
rhot
voltusya писал(а):
16 май 2018, 08:32
Попался полезный ресурс на тему выбора геокодера
Хороший ресурс, спасибо!