Какой геокодер сможет обработать 55К+ адресов?
- rhot
- Гуру
- Сообщения: 1727
- Зарегистрирован: 25 янв 2011, 17:50
- Репутация: 194
- Ваше звание: доктор
- Откуда: Архангельск
Какой геокодер сможет обработать 55К+ адресов?
Какой геокодер бесплатно сможет обработать 55К+ адресов в день?
У Google лимит в 2500 запросов/день. У Yandex немного лучше - 25000. Лимит у Nominatim не понятен.
У Google лимит в 2500 запросов/день. У Yandex немного лучше - 25000. Лимит у Nominatim не понятен.
___________(¯`·.¸(¯`·.¸ Scientia potentia est _/ {SILVA}:::{FOSS}:::{GIS} \_ Знание сила ¸.·´¯)¸.·´¯)___________
-
- Гуру
- Сообщения: 4064
- Зарегистрирован: 15 окт 2010, 08:33
- Репутация: 1061
- Ваше звание: программист
- Откуда: Казань
Re: Какой геокодер сможет обработать 55К+ адресов?
плодим ботов с разными IP через VPN и прочие анонимайзеры ... трех ботов достаточно
-
- Гуру
- Сообщения: 5298
- Зарегистрирован: 09 апр 2010, 19:30
- Репутация: 1015
- Ваше звание: просто мимо прохожу
- Откуда: Ё-бург
Re: Какой геокодер сможет обработать 55К+ адресов?
свой сервер подними - сколько надо, столько и будетЛимит у Nominatim не понятен.
- rhot
- Гуру
- Сообщения: 1727
- Зарегистрирован: 25 янв 2011, 17:50
- Репутация: 194
- Ваше звание: доктор
- Откуда: Архангельск
Re: Какой геокодер сможет обработать 55К+ адресов?
Про костыли типа собственного сервера и ботов я знаю. Контекст вопроса иммено в бесплатном геокодировании 55К адресов/день с наименьшими затратами.
Пока решил с помощью связки Yandex Geocoder API и Nominatim API. Задача решается за 17 часов.
Пока решил с помощью связки Yandex Geocoder API и Nominatim API. Задача решается за 17 часов.
___________(¯`·.¸(¯`·.¸ Scientia potentia est _/ {SILVA}:::{FOSS}:::{GIS} \_ Знание сила ¸.·´¯)¸.·´¯)___________
- jerry-maori
- Гуру
- Сообщения: 585
- Зарегистрирован: 22 авг 2012, 17:02
- Репутация: 143
- Откуда: Нижний Новгород
Re: Какой геокодер сможет обработать 55К+ адресов?
у яндекса (и у гугла) вроде ещё в правилах пользования есть лимиты на то, где полученные результаты можно использовать...
-
- Гуру
- Сообщения: 1195
- Зарегистрирован: 23 апр 2011, 10:32
- Репутация: 205
- Откуда: Ульяновск
Re: Какой геокодер сможет обработать 55К+ адресов?
Нигде, кроме их API, и хранить нельзя. Но кто использует VPN и ботов против технических ограничений, думаете заботят такие формальные ограничения?
- jerry-maori
- Гуру
- Сообщения: 585
- Зарегистрирован: 22 авг 2012, 17:02
- Репутация: 143
- Откуда: Нижний Новгород
Re: Какой геокодер сможет обработать 55К+ адресов?
ну и я к тому, что единственное (имхо) технически и юридически верное решение -- своё сервер nominatim ( с учётом того, что единственная "чистая" картооснова -- тот же OSM, решение более чем осмысленное)
тот же postgres в плане тюнинга производительности -- блин поле широчайшее...
по поводу 55к запросов -- ну блин, истансы в облаках как бы не вот сотни нефтей строят.
тот же postgres в плане тюнинга производительности -- блин поле широчайшее...
по поводу 55к запросов -- ну блин, истансы в облаках как бы не вот сотни нефтей строят.
- rhot
- Гуру
- Сообщения: 1727
- Зарегистрирован: 25 янв 2011, 17:50
- Репутация: 194
- Ваше звание: доктор
- Откуда: Архангельск
Re: Какой геокодер сможет обработать 55К+ адресов?
Ну, или запросы каждые 2 секунды слать через Nominatim.jerry-maori писал(а): ↑08 май 2018, 21:39единственное (имхо) технически и юридически верное решение -- своё сервер nominatim
Это да, Яндекс только кэшировать до 30 дней разрешает, и то только в особых случаях. Для хранения и обработки данных лучше варианта, чем Nominatim не найти.
___________(¯`·.¸(¯`·.¸ Scientia potentia est _/ {SILVA}:::{FOSS}:::{GIS} \_ Знание сила ¸.·´¯)¸.·´¯)___________
- novia
- Гуру
- Сообщения: 2261
- Зарегистрирован: 29 апр 2011, 15:06
- Репутация: 489
- Откуда: Тель-Авив
Re: Какой геокодер сможет обработать 55К+ адресов?
24*3600/2 = 43200 адресов в nominatim в день, если таймаут 2 секунды
опытным путем выяснено, что публичный номинатим банит на сутки после 1500-3000 запросов, если без секундных таймаутов. через сутки бан убирают.
если качество геокодирования по OSM устраивает, проще потратить время на поднятие своего nominatim
можно и больше, если осторожно. но, конечно, стоит соблюдать правила использования сервиса, а то прикроют как росреестр
понравилось? жми палец вверх
-
- Гуру
- Сообщения: 1195
- Зарегистрирован: 23 апр 2011, 10:32
- Репутация: 205
- Откуда: Ульяновск
- rhot
- Гуру
- Сообщения: 1727
- Зарегистрирован: 25 янв 2011, 17:50
- Репутация: 194
- Ваше звание: доктор
- Откуда: Архангельск
Re: Какой геокодер сможет обработать 55К+ адресов?
___________(¯`·.¸(¯`·.¸ Scientia potentia est _/ {SILVA}:::{FOSS}:::{GIS} \_ Знание сила ¸.·´¯)¸.·´¯)___________
-
- Гуру
- Сообщения: 1195
- Зарегистрирован: 23 апр 2011, 10:32
- Репутация: 205
- Откуда: Ульяновск
- novia
- Гуру
- Сообщения: 2261
- Зарегистрирован: 29 апр 2011, 15:06
- Репутация: 489
- Откуда: Тель-Авив
Re: Какой геокодер сможет обработать 55К+ адресов?
в данном случае я имел в виду защиту от DDOS, водруженную на их сервисы после того, как народ начал массово забирать информацию по ЗУ и прочим объектам
.
понравилось? жми палец вверх
-
- Участник
- Сообщения: 78
- Зарегистрирован: 04 ноя 2014, 18:40
- Репутация: 48
- Откуда: Санкт-Петербург
Re: Какой геокодер сможет обработать 55К+ адресов?
Попался полезный ресурс на тему выбора геокодера:
https://stevage.github.io/which-geocoder/
https://stevage.github.io/which-geocoder/
- rhot
- Гуру
- Сообщения: 1727
- Зарегистрирован: 25 янв 2011, 17:50
- Репутация: 194
- Ваше звание: доктор
- Откуда: Архангельск
Re: Какой геокодер сможет обработать 55К+ адресов?
Хороший ресурс, спасибо!
___________(¯`·.¸(¯`·.¸ Scientia potentia est _/ {SILVA}:::{FOSS}:::{GIS} \_ Знание сила ¸.·´¯)¸.·´¯)___________
Кто сейчас на конференции
Сейчас этот форум просматривают: нет зарегистрированных пользователей и 0 гостей