Списки населенных мест с валидацией границ и адресов

Kuritsyn Roman · 2017-11-15 10:25:03

проблема в том чтобы все вносившие/редактировавшие согласились с подобным изменением и впоследствии не было "войны правок". плюс дополнить определяющие статьи в вики чтобы в дальнешйем не было новых с.о.

Какая война правок? Один раз сделать одинаково по стране (ранее я уже рассказал как) и подправить валидатор.

А для избежания новых с.о. надо смотреть в WIKI.
Есть в вики статья "Названия", где прямо в заголовке написано и жирным выделено "Сокращения и аббревиатуры (не используйте их)". Куда уж понятней.

Почему у меня такой проблемы не было?!

Надо с умом с базы брать данные. Я сюда попал как раз из-за с.о., так как один пользователь по примеру других мапил и переправлял с сельского округа на с.о., чтоб валидатор кушал правильно данные. Меня это не устраивает - мапинг под валидатор.

Сначала в маны - потом в карты.

Last edited by Kuritsyn Roman (2017-11-15 10:48:36)

dansit · 2017-11-16 08:04:55

pfg21 wrote:

Kuritsyn Roman, преобразовать "c.о." в "сельский округ" не проблема, это работа определенной степени нудности "и усё".
проблема в том чтобы все вносившие/редактировавшие согласились с подобным изменением и впоследствии не было "войны правок". плюс дополнить определяющие статьи в вики чтобы в дальнешйем не было новых с.о.

В связи с тем что активных мапперов в Казахстане, скажем та не очень много, то переговорить с каждым вполне возможно.
И к то тому же я пока заметил что все эти с.о. и п.а Вносили в основном chnav и iwowik, ну и я в последнее время.
Остальных что то я не заметил, которых озадачивает наличие в адресе сельских округов и поселковых администраций.

И предполагаю что все сокращения вносились по валидатору. То есть поправить валидатор и возможно что больше уже никто не будет пользоваться сокращениями.
Ну можно пару строк в вики тиснуть в статью про нанесение адресов, хотя там и так написано о нежелательности сокращений.

Сам процесс удаления сокращений по всему Казахстану займет минут 30-40.
Я даже запрос через Overpass подготовил, скачал все объекты с сокращениями, заменил все объекты с сокрашениями.
Можно было даже залить. Но валидатор тут же скажет что туча ошибок.

Так что можно вообще удалить из валидатора сокращения.
Пускай будут только полные названия, те которые он пишет после "нас.пункты found"
А все остальное будет ошибкой.

chnav · 2017-11-16 08:47:09

dansit wrote:

pfg21 wrote:
Kuritsyn Roman, преобразовать "c.о." в "сельский округ" не проблема, это работа определенной степени нудности "и усё".
проблема в том чтобы все вносившие/редактировавшие согласились с подобным изменением и впоследствии не было "войны правок". плюс дополнить определяющие статьи в вики чтобы в дальнешйем не было новых с.о.
В связи с тем что активных мапперов в Казахстане, скажем та не очень много, то переговорить с каждым вполне возможно.
И к то тому же я пока заметил что все эти с.о. и п.а Вносили в основном chnav и iwowik, ну и я в последнее время.
Остальных что то я не заметил, которых озадачивает наличие в адресе сельских округов и поселковых администраций.
И предполагаю что все сокращения вносились по валидатору. То есть поправить валидатор и возможно что больше уже никто не будет пользоваться сокращениями.
Ну можно пару строк в вики тиснуть в статью про нанесение адресов, хотя там и так написано о нежелательности сокращений.
Сам процесс удаления сокращений по всему Казахстану займет минут 30-40.
Я даже запрос через Overpass подготовил, скачал все объекты с сокращениями, заменил все объекты с сокрашениями.
Можно было даже залить. Но валидатор тут же скажет что туча ошибок.
Так что можно вообще удалить из валидатора сокращения.
Пускай будут только полные названия, те которые он пишет после "нас.пункты found"
А все остальное будет ошибкой.

Kuritsyn Roman wrote:

Сначала в маны - потом в карты.

Я в своё время идентифицировал и нашел на карте сотни, если не тысячи, населенных пунктов (Костанайская, Кызылординская, Жамбылская, Южно-Казахстанская), многие были переименованы, многие имеют двойников в соседних районах и т.д. Месяцы работы. Я отмечал эти населенные пункты у себя в Excel-табличке, но валидатор делает это нагляднее и сильно помогает систематизировать информацию.

Если бы была возможность сделать в валидаторе равнозначными "с.о." и "сельский округ" то и вопросов бы не было.

Я лично неспособен сделать валидатор, поэтому завишу от доброй воли Вовика. Если прямо сейчас поменять все с.о. на "сельский округ" то, например, в ВКО навсегда останутся непроверенными/невнесенными 1.5 тысячи НП. "Правда" останется за вики, но карта будет пустая.

Last edited by chnav (2017-11-16 09:02:46)

Kuritsyn Roman · 2017-11-16 12:40:17

chnav wrote:

Если прямо сейчас поменять все с.о. на "сельский округ" то, например, в ВКО навсегда останутся непроверенными/ невнесенными 1.5 тысячи НП. "Правда" останется за вики, но карта будет пустая.

"непроверенными/невнесенными" где, в валидаторе или у вас в табличке?

Мы как раз тут и ведём разговор о совместной правке на карте и в валидаторе, которая затрагивает одно сокращение, чтоб никому не навредить. Хотел бы я навредить: сделал бы правки по избавлению от сокращений, навернулись бы валидаторы и попробуй потом придумать обоснование для отката. Карта корректна, а что чей-то валидатор неправильно кушает данные — это проблема валидатора. Но, мы тут и ведём диалог, чтоб все рады были.

А в чём проблема с вашей таблицей? ID точек и линий остаётся тот же, что и был, только меняется системно с "с.о." на "сельский округ". Вы так же можете поменять у себя в таблице.
Статусные части пока не трогаем типа: "г." гора/город/грот и "п." переулок/проспект/площадь, хотя надо бы.

Если у Вас есть правки или инфа о НП отличающееся от КАТО(устарел/ошибка/etc) — я думаю мы все будем благодарны и Вовик добавит данные в валидатор, после проверки. Выкладывайте.

Last edited by Kuritsyn Roman (2017-11-16 12:52:19)

wowik · 2017-11-16 13:37:41

Проблема только в том, чтобы инициатор(ы) взял(и) на себя труд не только провернуть переименования, но и поддерживать его, отбиваясь то нападок несогласных, объясняя вопрошающим и исправляя за неразумными.
В валидаторе не долго поменять, работать с людьми дольше.

И хорошо бы иметь место, где будет как-то зафиксировано и обосновано именно это решение, чтобы туда посылать было удобно.

wowik · 2017-11-16 13:44:09

А вопросов ещё много.
Сокращений много.
с.о. с.а ...
Все уж сразу раскрывать надо
Г.А. в начале названия раскрывать надо, а оно в конце стоит.
Степногорск Г.А.
Городской акимат Степногорск

Last edited by wowik (2017-11-16 14:15:53)

Kuritsyn Roman · 2017-11-16 14:28:49

wowik wrote:

А вопросов ещё много.
Сокращений много.
с.о. с.а Г.А. ...
Все уж сразу раскрывать надо

Давайте обкатаем с одним сокращением, чтоб валидатор нормально скушал и мы убедились, что всё так как мы думаем.

Вся проблема сейчас в поддержании актуальности данных, выгрузка с КАТО раз в N лет и внесение правок с форума. Была тут где-то идея открыть код валидатора, а нет ли желания перенести базу в что-то типо гитхаба или на сам гитхаб, чтоб видеть базу, вносить комиты, а Вам останется принимать правку или отвергать, автозагрузку базы в валидатор можно наладить на раз два.

wowik wrote:

И хорошо бы иметь место, где будет как-то зафиксировано и обосновано именно это решение, чтобы туда посылать было удобно.

А по сути: мы что делаем этим? Вносим правки согласно правилам/рекомендациям WIKIOSM, собираемся исправить упущенное исправление базы КАТО. Можно ссылку на данную тему, что да как и почему такая правка в пределах страны. Прямо в правке писать.

В пример с КАТО: почти по всем гос. базам(таблицам на гос. сайтах) пишется так: "КГУ ОСШ" и все документы так подаются и бланки и прочее, а на деле это "Коммунальное Государственное Учреждение Общеобразовательная Средняя Школа" и таких устоявшихся сокращений великое множество, но для обычного пользователя — эти буквы ничего не говорят. Я уже пару дней пытаюсь расшифровать аббревиатуру СИП(на технических планах фабрики), здание на территории фабрики рядом с электроподстанцией, техника и оборудование на улице явно для ремонта высоковольтных электросетей, хоть выходи и спрашивай (только по пропускам).

Сейчас стоит задача: привести данные в валидаторе и на карте к единому формату записи, без сокращений, которые в КАТО, потом пройдемся по остальным базам.

Актуальность валидатора добавит много участников.

Last edited by Kuritsyn Roman (2017-11-16 14:40:49)

dansit · 2017-11-16 15:31:22

Давайте все таки сперва с addr:subdistrict разберемся.
А Г.А в addr:district пока не будем трогать. Да и их значительно меньше в названии районов.

В в addr:subdistrict
сокращений все всего то.

1. с.о. - сельский округ
2. с.а. - сельская администрация
3. п.а. - поселковая администрация
4 г.а. городская администрация, но может быть городской акимат. с этим ,думаю,придется повозится. Автоматом скорей всего не получится. Придется сперва автоматом сменить г.а. на городская администрация, а потом вручную, где надо исправить на городской акимат. Я не думаю. что работы будет много, Думаю за несколько часов исправлю так как их мало.
5 р.а. - районная администрация

Last edited by dansit (2017-11-16 15:50:20)

chnav · 2017-11-16 15:49:25

Kuritsyn Roman wrote:

chnav wrote:
Если прямо сейчас поменять все с.о. на "сельский округ" то, например, в ВКО навсегда останутся непроверенными/ невнесенными 1.5 тысячи НП. "Правда" останется за вики, но карта будет пустая.
"непроверенными/невнесенными" где, в валидаторе или у вас в табличке?

Невнесенными в ОСМ. Сейчас валидатор подсвечивает что в вашей области что-то не так с 1583 населенными пунктами, хоть какой-то стимул поправить, направление задано. Без валидатора даже этого не обнаружишь.

Моя табличка тут никаким боком, это тот же КАТО, где я цветом помечаю _для себя_ что я лично сверил, что не смог найти на местности, а что переименовано. В геодезии это называется "правило второй руки".

PS: если кто не понял - я не против разворачивания сокращений, я просто предупреждаю что без валидатора адресация в КЗ постепенно протухнет.

Last edited by chnav (2017-11-16 15:58:23)

dansit · 2017-11-16 16:01:09

Так ведь если валидатор будет по полному названию ошибки искать то ничего не изменится в методике исправления ошибок и нанесения отсутствующих НП. Абсолютно. Кроме того что данные будут соответствовать правилам OSM.
И данные не протухнут

Last edited by dansit (2017-11-16 16:02:03)

wowik · 2017-11-16 16:40:42

dansit wrote:

4 г.а. городская администрация, но может быть городской акимат.

там всё четко
городской акимат - Г.А.
городская администрация - г.а.

В валидаторе слева видны расшифровки.
Проблема в том, что иногда Г.А. надо бы впереди раскрывать, а они строго сзади пишутся.

Другие сокращения пишут и спереди, и сзади, чтобы было правильно, а вот Г.А. только сзади

Last edited by wowik (2017-11-16 16:56:44)

wowik · 2017-11-16 16:43:22

Kuritsyn Roman wrote:

А по сути: мы что делаем этим?

вот давайте и напишем в вики что мы делаем и как надо другим делать и как правильным образом мы раскрываем сокращения (и ссылка на почему, то есть на то, что сокращения не приветствуются).

Основываясь на этом, любой должен суметь повторить и без валидатора.
Иначе поддерживать всё в единообразном порядке будет нелегко.
Придет очередной маппер, возьмет КАТО и начнет под него сворачивать наименования взад.

Last edited by wowik (2017-11-16 17:00:02)

Kuritsyn Roman · 2017-11-16 17:01:51

chnav wrote:

Сейчас валидатор подсвечивает что в вашей области что-то не так с 1583 населенными пунктами, хоть какой-то стимул поправить, направление задано.

Приводим данные в валидаторе в нормальный вид и о чудо, может появятся в валидаторе новые населённые пункты.
По простому: Ошибка в базе валидатора. Есть правки с сокращениям как в КАТО/Валидаторе, есть развёрнутые сокращения, а есть немного бреда.
Валидатор будет кушать "сельский округ", который мы разверём из "с.о.", на карте уже не будет "Такой-то с.о.", а будет: "такой-то сельский округ".

chnav wrote:

Без валидатора даже этого не обнаружишь.

Правим валидатор, правим карту и дальше картируйте, вы даже не заметите разницы, кроме развёрнутой статусной части вместо сокращения. Пишите такой-то сельский округ, вместо такой-то с.о. и будет вам счастье.

И ещё раз: валидатор будет работать, для этого мы и оговариваем нюансы.

wowik · 2017-11-16 17:05:09

Мне как-то полумеры не по вкусу. Не стоит рубить кошке хвост по частям, чтобы не так больно было.
Лучше было бы менять уж везде, а разнобой приведет к еще большим ошибкам.

Увидел, что в соседней области сокращение раскрыто, раскрыл в name, а про addr:* и слыхом не слыхивал, а адресация развалилась. И эти метания и качания затухать не будут.

Last edited by wowik (2017-11-17 07:18:34)

Kuritsyn Roman · 2017-11-16 17:07:58

wowik wrote:

Лучше было бы менять уж везде, а разнобой приведет к еще большим ошибкам.

Стоит подготовить для наглядности сводную таблицу с чего на что меняем.
Границы, точки, площади имена и всё что связано с адресацией.

Last edited by Kuritsyn Roman (2017-11-16 17:11:48)

dansit · 2017-11-16 17:51:30

wowik wrote:

Kuritsyn Roman wrote:
А по сути: мы что делаем этим?
вот давайте и напишем в вики что мы делаем и как надо другим делать и как правильным образом мы раскрываем сокращения (и ссылка на почему, то есть на то, что сокращения не приветствуются).
Основываясь на этом, любой должен суметь повторить и без валидатора.
Иначе поддерживать всё в единообразном порядке будет нелегко.
Придет очередной маппер, возьмет КАТО и начнет под него сворачивать наименования взад.

Да написать надо.
Но только кто? У кого есть аккаунт в вики
Я в вики только читатель .
Да и это надо уметь правильно написать.

wowik · 2017-11-16 18:09:04

Там логин/пароль тот, что для редактирования данных, если мне не изменяет память.

Kuritsyn Roman · 2017-11-16 18:46:06

Пользователи смотрят по примеру в округе.
Мало кто занимается административными границами и всё что с ними связано, муторно и непонятно сперва.
Если добрались ручки до КАТО, то ВИКИпедия обычная уже прочитана по этому пункту, а там как раз всё расписано, без сокращений.

Я больше виню валидатор, чем то, что пользователь тупо взял данные из КАТО и вбил не думая.

В пределах Казахстана все границы/полигоны/отношения/точки:

Логин Кол-во Процент

Последние авторы правки объекта с "с.о."
iWowik 2396 58%
dansit 858 21%
chnav 285 7%
rashaurl 245 6%
rmikke 52 1%
Kostik 40 1%

Последние авторы правки объекта с "п.а."
dansit 52 47%
iWowik 29 26%
chnav 9 8%
Seznam 4 4%
rmikke 4 4%
Kostik 3 3%

Последние авторы правки объекта с "г.а."
iWowik 105 33%
dansit 84 26%
chnav 59 18%
nyuriks 29 9%
Kostik 9 3%
Seznam 6 2%
afonin 4 1%

Мне кажется или весомые авторы правок уже тут?!
А с новичками в границах можно и поговорить.

P.S. Спасибо за мапинг под валидатор.

Last edited by Kuritsyn Roman (2017-11-16 18:51:16)

wowik · 2017-11-16 20:53:09

Валидатор был настроен под тогдашнюю практику, всё, что я видел, было с сокращениями. Вот он ее и зафиксировал.

Добавил в полные имена в качестве альтернативных - пишите, как хотите
Где там полные имена есть, чтобы проверить, что работает верно?
http://wowik.000space.com/places/kz/

Теперь прогнал вариант с полными в качестве основных, а сокращенные в качестве альтернативных.
Оказывается всё уже короткое. Длинные вылазят лишь там, где получились ошибки.
http://wowik.000space.com/places/kz_new/396400000.htm
или где таки не проставлен addr:*
http://wowik.000space.com/places/kz_new/634000000.htm

Last edited by wowik (2017-11-16 21:57:13)

chnav · 2017-11-17 03:47:57

Kuritsyn Roman wrote:

P.S. Спасибо за мапинг под валидатор.

Абсолютно неверное понимание - обозначали по КАТО, с чего-то же надо было начинать. "Плохая" система лучше никакой системы.

wowik, спасибо, взял и быстро разрулил ))

Last edited by chnav (2017-11-17 03:48:51)

wowik · 2017-11-17 07:01:51

chnav wrote:

Последние авторы правки объекта

Это я там проставлял вики и примкнувшую к ней викидату.
Точнее будет, если смотреть первую правку, скорее всего имя там давалось объекту

Last edited by wowik (2017-11-17 07:04:06)

wowik · 2017-11-17 07:10:26

Ох уж этот КАТО
http://wowik.000space.com/places/kz_new/395200000.htm

Last edited by wowik (2017-11-17 08:02:58)

chnav · 2017-11-17 07:15:58

wowik wrote:

chnav wrote:
Последние авторы правки объекта
Это я там проставлял вики и примкнувшую к ней викидату.
Точнее будет, если смотреть первую правку, скорее всего имя там давалось объекту

Это не моя цитата ))

wowik · 2017-11-17 07:17:58

chnav wrote:

Это не моя цитата ))

Quick quote шалит?

dansit · 2017-11-17 08:01:29

big_smile
http://wowik.000space.com/places/kz_new/395200000.htm

I am sorry.
Не совсем понял алгоритм.
Если есть полное название, то название с сокращением считается ошибкой?
А если его нет, сокращения не считаются ошибкой.

Так что ли?

Или сокращения вообще ошибка?

По мне сокращения лучше никак не учитывать - считать ошибкой.

Announcement

#751 2017-11-15 10:25:03

Re: Списки населенных мест с валидацией границ и адресов

#752 2017-11-16 08:04:55

Re: Списки населенных мест с валидацией границ и адресов

#753 2017-11-16 08:47:09

Re: Списки населенных мест с валидацией границ и адресов

#754 2017-11-16 12:40:17

Re: Списки населенных мест с валидацией границ и адресов

#755 2017-11-16 13:37:41

Re: Списки населенных мест с валидацией границ и адресов

#756 2017-11-16 13:44:09

Re: Списки населенных мест с валидацией границ и адресов

#757 2017-11-16 14:28:49

Re: Списки населенных мест с валидацией границ и адресов

#758 2017-11-16 15:31:22

Re: Списки населенных мест с валидацией границ и адресов

#759 2017-11-16 15:49:25

Re: Списки населенных мест с валидацией границ и адресов

#760 2017-11-16 16:01:09

Re: Списки населенных мест с валидацией границ и адресов

#761 2017-11-16 16:40:42

Re: Списки населенных мест с валидацией границ и адресов

#762 2017-11-16 16:43:22

Re: Списки населенных мест с валидацией границ и адресов

#763 2017-11-16 17:01:51

Re: Списки населенных мест с валидацией границ и адресов

#764 2017-11-16 17:05:09

Re: Списки населенных мест с валидацией границ и адресов

#765 2017-11-16 17:07:58

Re: Списки населенных мест с валидацией границ и адресов

#766 2017-11-16 17:51:30

Re: Списки населенных мест с валидацией границ и адресов

#767 2017-11-16 18:09:04

Re: Списки населенных мест с валидацией границ и адресов

#768 2017-11-16 18:46:06

Re: Списки населенных мест с валидацией границ и адресов

#769 2017-11-16 20:53:09

Re: Списки населенных мест с валидацией границ и адресов

#770 2017-11-17 03:47:57

Re: Списки населенных мест с валидацией границ и адресов

#771 2017-11-17 07:01:51

Re: Списки населенных мест с валидацией границ и адресов

#772 2017-11-17 07:10:26

Re: Списки населенных мест с валидацией границ и адресов

#773 2017-11-17 07:15:58

Re: Списки населенных мест с валидацией границ и адресов

#774 2017-11-17 07:17:58

Re: Списки населенных мест с валидацией границ и адресов

#775 2017-11-17 08:01:29

Re: Списки населенных мест с валидацией границ и адресов

Board footer