Забанили

Ivan Komarov · 2010-01-24 11:07:52

Ну вот, общественно полезная деятельность, как водится, привела к проблемам - забанили IP с 14-го числа, не иначе как за вытягивание osmget'ом СЗФО. Кому писать, куда стучаться? Кто-нибудь знает?

Calibrator · 2010-01-24 14:12:55

Попробуй в TRAC Если окажется, что не туда - они всё равно отреагируют и подскажут, куда обратиться. А здесь дай ссылочку на открытую "Заявку на исправление ошибки" - думаю наши там все поставят свои "подписи". Своих в обиду не дадим!!!

Last edited by Calibrator (2010-01-24 14:16:31)

Ivan Komarov · 2010-01-24 14:53:56

Вроде не подходящее место. Подожду еще, может в понедельник кто на ихнем форуме откликнется из админов.

Komяpa · 2010-01-24 15:08:48

[14:54:56] <Komzpa> TomH: you probably banned this guy http://forum.openstreetmap.org/viewtopic.php?id=6142
[14:55:16] <Komzpa> TomH: please comment in the topic on API usage
[14:55:23] <TomH> quite possibly, but that will be separate
[14:55:32] <TomH> I have no idea what that even says!
[14:56:00] <TomH> and the google translation is er "interesting"
[14:56:30] <TomH> there's no indicate of what the IP is or what he was doing that he thinks should be allowed
[14:57:11] <Komzpa> TomH: he has been downloading some large region using osm-get.pl
[14:57:24] <TomH> well he shouldn't - that's what planet is for
[14:57:41] <TomH> and yse I did block a number of people that were using LWP to scrape data

Итак:
1. Для разбанивания нужно обратиться с IP к TomH на IRC-канале #osm на irc.oftc.net (прямо по соседству с нашим #osm-ru)
2. Для добычи ежедневных вырезок следует пользоваться planet-файлами или другими подобными способами, а не насиловать API. Оно и так на ладан дышит, в связи с огромной активностью в районе Гаити.

liosha · 2010-01-24 15:32:43

Значит, Северо-запад тоже на гислабовские исходники переключу

Ivan Komarov · 2010-01-24 17:17:54

Котяра, спасибо. Общаюсь с Томом.

Ivan Komarov · 2010-01-24 17:22:10

Разблокировали.
Что в этой связи делать? На XAPI, судя по всему, переходить смысла тоже не много, так что проект с "выкачанными" файлами можно прикрывать?

Zkir · 2010-01-24 17:28:48

так есть же дампы, от Кексины и от Гис-лаб. Зачем еще что-то выкачивать?

chilin · 2010-01-24 18:03:51

Некоторые области на fmesh актуальные - их с другого ip кто-то выкачивает? Если есть возможность, их нужно оставить - альтернативный источник это хорошо. В гислабовских областях бывает по нескольку дней сидят старые данные, хоть и обновляются каждый день, а для навителовского конвертирования это неприятно.

sim · 2010-01-24 18:34:02

chilin wrote:

В гислабовских областях бывает по нескольку дней сидят старые данные, хоть и обновляются каждый день, а для навителовского конвертирования это неприятно.

Нормально этого быть не должно. Данные обновляются ежедневно. Несколько раз были задержки в день-два, например недавно расширили область интереса до калиниграда и пришлось переделать систему обновления XML и базы, в борьбе с глюками пара дней прошла да. Но апдейты идут ежедневно. Если есть конкретика, где что отсутствует - пишите, разберемся, от ошибок никто не застрахован.

Last edited by sim (2010-01-24 18:35:45)

Ivan Komarov · 2010-01-24 18:37:04

В принципе можно наладить выкачивание через XAPI, Старые данные для Garmin'ов не менее неприятны. Еще можно gislab стимулировать, чтобы актуальные данные обеспечивали

sim · 2010-01-24 18:46:09

Да обеспечиваем мы, обеспечиваем Если есть проблемы с актуальностью - пишите вот сюда, пока вроде не один запрос или жалоба без решения не осталась: http://forum.openstreetmap.org/viewtopi … d=5274&p=3

Просто идет период устаканивания техпроцесса, периодически его приходится менять. Так как я лично выгрузками не пользуюсь, их соответствие реалиям ложится на сообщество. Нет комментариев от сообщества (содержательных) - нет решения проблем.

liosha · 2010-01-24 19:00:19

Москву я сам выкачиваю и пока собираюсь продолжать выкачивать.
Так что прикрывать не стоит

Ivan Komarov · 2010-01-24 19:04:50

у тебя иммунитет?

liosha · 2010-01-24 19:06:13

Динамический IP

Ivan Komarov · 2010-01-24 19:08:48

Ясно. А я недавно статическим обзавелся. Радовался, дурачок

Ezhick · 2010-01-24 19:56:13

анонимные прокси вроде никто не отменял...

Komяpa · 2010-01-24 20:00:04

Сейчас на полном серьёзе обсуждается введение обязательной авторизации для запросов map. Именно из-за умных людей с osm-get и анонимными проксями, мешающими нормальной работе API.
Ну тяните хотя бы уж с XAPI, что ли.. ему не так больно

Ezhick · 2010-01-24 20:29:51

Я тяну с ксапи, но удовольствия от этого не получаю никакого... Поэтому пишу экспортировалку из посгреса. Тока медленно, времени на нее нету

Sergey Astakhov · 2010-01-24 21:43:28

Кстати, а доступ к мапник-у нигде не блокируется? А то у меня периодически из дома он перестаёт работать. С работы всё в порядке. Это блокировка или глюки провайдера?

Last edited by Sergey Astakhov (2010-01-24 21:43:51)

Komяpa · 2010-01-24 22:06:09

Мапник блокируется в автоматическом режиме при выкачивании более миллиона тайлов в день с одного IP. Вполне демократичное ограничение

Sergey Astakhov · 2010-01-24 22:18:26

Komяpa wrote:

Мапник блокируется в автоматическом режиме при выкачивании более миллиона тайлов в день с одного IP. Вполне демократичное ограничение

Ну я ничего такого не вытворял.
Блокируется один IP или подсеть? И насколько? Просто уже несколько дней не пускает, переподключение не помогает, т.е. заблокирована вся подсеть...

liosha · 2010-01-25 07:58:54

Komяpa wrote:

Ну тяните хотя бы уж с XAPI, что ли.. ему не так больно

Разумеется, по возможности используется XAPI.
Но оно обновляется небыстро, а иногда территория нужна именно свежая.

astroiLL · 2010-01-25 08:00:37

Меня похоже тоже забанили.
Т.ч. я перестал качать OSM для Кубани и Ростовской области.
Какие предложения, где брать OSM-файлы регионов?

Alexandr Zeinalov · 2010-01-25 08:05:00

astroiLL, на gis-lab. Или ручками вырезать из более крупных дампов.

Announcement

#1 2010-01-24 11:07:52

Забанили

#2 2010-01-24 14:12:55

Re: Забанили

#3 2010-01-24 14:53:56

Re: Забанили

#4 2010-01-24 15:08:48

Re: Забанили

#5 2010-01-24 15:32:43

Re: Забанили

#6 2010-01-24 17:17:54

Re: Забанили

#7 2010-01-24 17:22:10

Re: Забанили

#8 2010-01-24 17:28:48

Re: Забанили

#9 2010-01-24 18:03:51

Re: Забанили

#10 2010-01-24 18:34:02

Re: Забанили

#11 2010-01-24 18:37:04

Re: Забанили

#12 2010-01-24 18:46:09

Re: Забанили

#13 2010-01-24 19:00:19

Re: Забанили

#14 2010-01-24 19:04:50

Re: Забанили

#15 2010-01-24 19:06:13

Re: Забанили

#16 2010-01-24 19:08:48

Re: Забанили

#17 2010-01-24 19:56:13

Re: Забанили

#18 2010-01-24 20:00:04

Re: Забанили

#19 2010-01-24 20:29:51

Re: Забанили

#20 2010-01-24 21:43:28

Re: Забанили

#21 2010-01-24 22:06:09

Re: Забанили

#22 2010-01-24 22:18:26

Re: Забанили

#23 2010-01-25 07:58:54

Re: Забанили

#24 2010-01-25 08:00:37

Re: Забанили

#25 2010-01-25 08:05:00

Re: Забанили

Board footer