Списки населенных мест с валидацией границ и адресов

newpavlov · 2015-03-27 18:39:52

А вот такие нераспознанные списки НП планируется руками разбирать или же будет доработка алгоритма мердженья?

Кстати, ФИАСовские улицы штука весьма полезная, для многих деревень в которых одна-две улицы эта фича позволяет успешно проставлять названия, благо таких случаев хватает.

wowik · 2015-04-16 09:30:35

newpavlov wrote:

А вот такие нераспознанные списки НП

Ссылка уехала наверно. Или там выпавшие из граниз НП улицы?
Если ФИАСовские НП и улицы, то матчинг там еще есть куда улучшать. Шлите примеры.
Ручное разгребание возможно путем использование alt_name.
В ФИАС/КЛАДР часто название бывает старое с опечаткой и совать его в качестве alt_name не всегда здорово.

ФИАС обновил

Last edited by wowik (2015-04-16 09:51:06)

newpavlov · 2015-04-16 10:20:06

Я про ФИАСовские НП, видимо большинство успешно сматчилось после.
Из того что осталось после того как я прошёлся по районам (в большинстве районов вроде как просто опечатки): 1, 2, 3, 4, 5, 6, 7, 8 (здесь больше всего, 13 деревень с одинаковыми названиями). Оставшееся не успел посмотреть, из-за редиректов на страницу хостера.
Думаю, основную часть легко сопоставить просто запросив НП в районе у которых ФИАСа нет.

wowik · 2015-04-16 10:22:53

Отвалился что-то хостер.
Ждем пока прочихается. Успел проверить свои лимиты - вроде их еще с избытком, так что это их общий сбой. И FTP тоже слег.

Last edited by wowik (2015-04-16 10:32:26)

wowik · 2015-04-16 10:31:29

newpavlov wrote:

8 (здесь больше всег

У! Тут пажежи !
Восстановил именительный.
Стало лучше
Осталось одно, которое теперь в Шинерпосинское сельское поселение.

Last edited by wowik (2015-04-16 10:46:58)

wowik · 2015-04-16 11:01:08

newpavlov wrote:

Думаю, основную часть легко сопоставить просто запросив НП в районе у которых ФИАСа нет

Там во многих оставшихся проблема именно в опечатках в имени.
Поиск среди незанятых, можно предложить только в качестве подсказки.

Last edited by wowik (2015-04-16 11:05:24)

newpavlov · 2015-04-16 15:39:54

А может какой-нибудь интерфейс прикрутить для указания пользователями подобных мест, нечто похожее на "отписаться об ошибке"? Или интерактивщину не планируется добавлять?

wowik · 2015-04-16 15:57:52

Подразумевалось, что у пользователя JOSM в руках и он всё сам поправит
Ну, или интерактивно можно отписываться в ветке форума для соответствующего региона.

На сервере никакой жизни пока нет - практически всё статические странички.

А главное что с этими ошибками надо делать?

wowik · 2015-04-17 19:12:17

По мотивам обсуждения http://forum.openstreetmap.org/viewtopi … 78#p497278
Сделал кнопочку открытия в JOSM границ всех районов в области или всех поселений в районе

поселения центр нас.пункты good found

and_pod · 2015-04-18 16:03:06

Предлагаю всегда указывать расстояние до координат НП в Википедии (сейчас только в подсказках когда ссылка на Википедию не найдена) и пометить цветом (например, разница больше 500м - желтый, больше 1км - красный). Тогда можно будет отследить ошибочный сдвиг. НП может оказаться ведь сдвинут и после того как вики-ссылка проставлена.
P.S. про 1 км имеется ввиду для деревень. точки города могут быть больше смещены. не подумал сразу

Last edited by and_pod (2015-04-18 16:06:27)

fserges · 2015-04-18 19:11:41

and_pod wrote:

Предлагаю всегда указывать расстояние до координат НП в Википедии (сейчас только в подсказках когда ссылка на Википедию не найдена) и пометить цветом (например, разница больше 500м - желтый, больше 1км - красный). Тогда можно будет отследить ошибочный сдвиг. НП может оказаться ведь сдвинут и после того как вики-ссылка проставлена.
P.S. про 1 км имеется ввиду для деревень. точки города могут быть больше смещены. не подумал сразу

Я сейчас делаю нечто подобное (для всех НП крупнее 3000 человек и ПГТ) и у меня стоит точность в 1800 метров. Ближе поставить невозможно если речь идёт не о деревнях в несколько домов.

P.S. Проверяю это еженедельно ручками (для крупных НП), в валидатор не вставляю так как мало ценности такой проверки.

wowik · 2015-04-18 19:18:27

Это в планах. Проблема еще в том, что в Вики полно ошибок в координатах и при такой диагностике не понятно в что и в какую сторону будут менять. Я править Вики не особо пылаю желанием, ну поправил несколько координат, а сколько их выплывет? Если не править вики, то будут эти ошибки висеть и глаза мозолить, значит это уже не валидация никакая.
Потом оказывается, что если статья на различных языках, то и координаты в них разные.
На Украине - у всего две статьи минимум.
В Белоруссии у многих деревень есть статьи на трех языках - русском и белорусском в двух орфографиях. Правда пока из белорусских статей не удалось координаты извлечь - Вики сама не отдает, надо парить текст.

Это в ближайших планах на попробовать. Но если Вики будет сильно врать, придется как-то выключать.
А пока, кто заметил, появилась кнопочка добавления викиссылки через JOSM

Last edited by wowik (2015-04-18 19:34:13)

and_pod · 2015-04-18 19:21:08

fserges wrote:

в валидатор не вставляю так как мало ценности такой проверки

Почему мало ценности? Я пару ошибок у себя нашел когда проставлял вики-ссылки по подсказкам в деревнях.
И для деревень у меня выходила точность порядка 300 метров.
В Вики тоже конечно ошибки бывают, но мне кажется немного. или мне так везло. Можно note оставлять, что в Вики ошибка, чтоб не двигали.

wowik wrote:

А пока, кто заметил, появилась кнопочка добавления викиссылки через JOSM

Спасибо за кнопочку. Прикольная! А то я всё ручками копировал

Last edited by and_pod (2015-04-18 19:41:04)

wowik · 2015-04-18 20:44:14

Я тоже долго ручками, пока не убедился, что расстояния определяются нормально.

Почему плохо в валидаторе? Потому, что это быстро скатится в валидатор Вики, а не ОСМ

Last edited by wowik (2015-04-18 20:44:44)

lenux · 2015-04-21 06:39:21

Wowik когда можно будет ожидать валидацию домов? В фиасе в том числе и дома есть

wowik · 2015-04-21 06:52:47

lenux wrote:

Wowik когда можно будет ожидать валидацию домов? В фиасе в том числе и дома есть

ФИАС домики уже больше года как читаются.
Их нельзя было сразу пустить в дело, надо было разбирался с улицами и прочими объектами. Теперь с ними уже прилично стало и в четверг уже было раскомментировал и поправил обработку ФИАС домиков.
Следующая задача вынуть домики из ОСМ, ибо там же не только домики с адресами, а еще черт знает что полезет.
Ну и самое страшное - придумать толковую выдачу. Одна идейка есть, посмотрит, что из этого выйдет.

Last edited by wowik (2015-04-21 07:14:46)

lenux · 2015-04-22 08:58:05

wowik планируется ли открывать исходники, что бы не получилось, как в итоге с первым валидатором?

Gum4eg · 2015-04-22 15:18:58

wowik wrote:

По мотивам обсуждения http://forum.openstreetmap.org/viewtopi … 78#p497278
Сделал кнопочку открытия в JOSM границ всех районов в области или всех поселений в районе

А можно её добавить и внутрь муниципальных образований? Например, чтобы скачать только точки поселений и добавить численность населения в соответствии с ВПН 2010.

wowik · 2015-04-22 21:05:04

Про исходники — там пока много пропиетаршины.
Про кнопку - добавил - будет грузить точки или что там найдется. При следующих выкладках появится.
Только не забывайте, что на веях тоже могут остаться не синхронизированные данные.

С выкладками будут перебои и отставания, как минимум до пятницы включительно — командировка.

keder · 2015-04-23 08:48:07

Заметил что добавились ссылки на вики для НП и, похоже, СП. Это ведь автоматически было сделано? А можно так же автоматически численность населения из вики вытянуть в тег population (а также всякие индексы и коды)?

fserges · 2015-04-23 10:27:04

keder wrote:

Заметил что добавились ссылки на вики для НП и, похоже, СП. Это ведь автоматически было сделано? А можно так же автоматически численность населения из вики вытянуть в тег population (а также всякие индексы и коды)?

А откуда уверенность что в Википедии там нормальные данные?

keder · 2015-04-23 10:50:40

Так нам точные (до человека) данные и не нужны. Интересует примерное число для выбора размера подписи на карте и 0 если не жилое (тут можно в рендере например автоматом добавлять к названию "нежил."). А если будут точные данные то поправят потом. А насчет кодов - посмотрел - вроде они их прямо из оф. источников берут, если же есть ошибки - люди поправят.

aks46 · 2015-04-23 11:45:54

Вчера быстро пробежался по базе ФИАС в части, касающейся Курской области, по тем местам где точно сам знаю адресную информацию. Удручающая местами картина вырисовывается. К примеру, в Курске, по улице Моковская (ей 100 лет в обед) отмечено менее четверти имеющихся адресов, в то же время в деревне Бабанино Горшеченского района уже лет 10 как никто не живет, уже даже остовы домов заросли деревьями и дорога к этому нас пункту поросла кустарником, в то же время в этой деревне в ФИАС отмечено около 20 адресов... справедливости ради, даже на ПКК не один адрес там не стоит на учете.
Это только два примера, я больше не копался. В то же время скажу, что все таки адреска ФИАС огромный шаг вперед по сравнению с полным или же частичным отсутствием вообще какой либо официальной информации.

Last edited by aks46 (2015-04-23 11:46:48)

wowik · 2015-04-23 19:20:41

У CupIvan'а был такой валидатор. Ерунды им из вики принести можно было достаточное количество.
В вики всё это импорты, за актуальностью и правильностью коих редакторы следить не поспевают.
Лучше уж обратится к актуальным первоисточникам этих данных.
Территориальное устройство, к примеру, гораздо приятней черпать из свежего ОКТМО, чем из вики.
То же самое и с кодами. ОКАТО=>ОКТМО публикуется официальная таблица.
Какие еще коды? Почтовые индексы? Лучше опять с почтовиков брать.
Если НП надежно сопоставлен со своим районом/поселением, то из любого справочника коды можно вытянуть.
Да хоть ту же перепись.

Статьи по НП в вики распределены крайне неравномерно.
Где-то есть практически все НП, тогда статья обычно находится правильная, но там где статей мало, то налодится много чего ложного, если вообще находится.
Пока вставил для проверки расстояние до координаты, указанной в статье.

Технически сама статья пока не парсится, посему ничего больше не достается, а хочется попробовать еще достать область/район/поселение для дополнительного контроля

Last edited by wowik (2015-04-23 19:22:29)

Stalker61 · 2015-04-24 05:12:59

Сломалось - http://wowik.000space.com/places/ru-khm/index.htm

Announcement

#301 2015-03-27 18:39:52

Re: Списки населенных мест с валидацией границ и адресов

#302 2015-04-16 09:30:35

Re: Списки населенных мест с валидацией границ и адресов

#303 2015-04-16 10:20:06

Re: Списки населенных мест с валидацией границ и адресов

#304 2015-04-16 10:22:53

Re: Списки населенных мест с валидацией границ и адресов

#305 2015-04-16 10:31:29

Re: Списки населенных мест с валидацией границ и адресов

#306 2015-04-16 11:01:08

Re: Списки населенных мест с валидацией границ и адресов

#307 2015-04-16 15:39:54

Re: Списки населенных мест с валидацией границ и адресов

#308 2015-04-16 15:57:52

Re: Списки населенных мест с валидацией границ и адресов

#309 2015-04-17 19:12:17

Re: Списки населенных мест с валидацией границ и адресов

#310 2015-04-18 16:03:06

Re: Списки населенных мест с валидацией границ и адресов

#311 2015-04-18 19:11:41

Re: Списки населенных мест с валидацией границ и адресов

#312 2015-04-18 19:18:27

Re: Списки населенных мест с валидацией границ и адресов

#313 2015-04-18 19:21:08

Re: Списки населенных мест с валидацией границ и адресов

#314 2015-04-18 20:44:14

Re: Списки населенных мест с валидацией границ и адресов

#315 2015-04-21 06:39:21

Re: Списки населенных мест с валидацией границ и адресов

#316 2015-04-21 06:52:47

Re: Списки населенных мест с валидацией границ и адресов

#317 2015-04-22 08:58:05

Re: Списки населенных мест с валидацией границ и адресов

#318 2015-04-22 15:18:58

Re: Списки населенных мест с валидацией границ и адресов

#319 2015-04-22 21:05:04

Re: Списки населенных мест с валидацией границ и адресов

#320 2015-04-23 08:48:07

Re: Списки населенных мест с валидацией границ и адресов

#321 2015-04-23 10:27:04

Re: Списки населенных мест с валидацией границ и адресов

#322 2015-04-23 10:50:40

Re: Списки населенных мест с валидацией границ и адресов

#323 2015-04-23 11:45:54

Re: Списки населенных мест с валидацией границ и адресов

#324 2015-04-23 19:20:41

Re: Списки населенных мест с валидацией границ и адресов

#325 2015-04-24 05:12:59

Re: Списки населенных мест с валидацией границ и адресов

Board footer