Эстония

SviMik · 2013-01-11 12:57:50

Опередили
Участник 78.153.131.* может вписать свой ник (либо вписать 78.153.131.* в качестве ника, если ему так угодно), и вернётся в таблицу.

Считать каждый раз статистику по таблице со зданиями - крайне затратно! Поэтому ввёл поля со статистикой в таблицу пользователей, и вывожу её.

Last edited by SviMik (2013-01-11 13:02:22)

wowik · 2013-01-11 14:17:34

Ура! 100%-й барьер взят! Идем дальше!

PavelRus · 2013-01-11 14:30:02

wowik wrote:

Ура! 100%-й барьер взят! Идем дальше!

Хм, опять 92%.

wowik · 2013-01-11 14:34:24

PavelRus wrote:

Хм, опять 92%.

страничку перегрузил — у меня теперь тоже 92%

SviMik · 2013-01-11 15:02:35

Общее количество ещё уточняется

Zverik · 2013-01-11 16:22:22

Наверное, какой-то хитрый осмер дорисовывает дома без адресов, подлец!

luiswoo · 2013-01-11 19:53:59

103.88% - горшочек варит и варит...

yuryleb · 2013-01-11 21:35:58

Все, уже повторы адресов пошли - я смотрю каждый дом на большой карте (там иногда двойные адреса появлялись, когда на маленьком фрагменте был показан только один) и ссылки туда стали появляться как уже посещенные

AlexTheTux · 2013-01-11 23:20:21

Ждите завтра блок новых домов в историческом центре Талинна.

SviMik · 2013-01-11 23:42:40

Обновления:

1. Синхронизировал базу с OSM и пересчитал количество заданий. Ещё немного сейчас появилось в наличии
2. При выполнении, задача сразу удаляется из базы, чтобы больше никогда не попадаться.
3. Когда задачи закончатся - сервер об этом сообщит (раньше подсовывал по второму кругу, так что получилось ~~140%~~ 104%).

Ждите завтра блок новых домов в историческом центре Талинна.

Хорошо, как проснусь - запущу обновление, и посморим на новые здания

Молодцы, красиво

Last edited by SviMik (2013-01-11 23:47:08)

AlexTheTux · 2013-01-12 14:27:01

В относительно большом количестве пошли мои дома из центра Талинна:

Но в не меньшем количестве пошли какие-то глюки: картинка не просто пустая - если посмотреть на адресную строку кнопки "Открыть в JOSM" внизу скриншота, видно, что в ней нет координат. После третьей такой (пустой) картинки из первых 13-ти, обкликивание прекратил - явно есть проблемы.

SviMik · 2013-01-12 14:38:42

Исправлено.

SviMik · 2013-01-12 19:46:34

Написал статью в вики. https://wiki.openstreetmap.org/wiki/RU:Maa-amet

luiswoo · 2013-01-12 20:26:29

Опять идёт по второму кругу.

Te*mik · 2013-01-12 20:41:16

Хоть счётчик откатился на пару процентов, все равно здания повторяются.

SviMik · 2013-01-12 21:22:43

100%

Ну всё, остаётся только начать выгрузку

(update)
Начинаю: http://www.openstreetmap.org/user/SviMik_import/edits

Last edited by SviMik (2013-01-12 21:36:39)

AlexTheTux · 2013-01-12 22:43:37

Так дома Талинна напрямую не пилить пока?

SviMik · 2013-01-12 22:46:21

По идее, дома, которые надо пилить, мной затронуты не будут. Так что можно пилить.

(update)
Завершён импорт Таллина. 23553 адресов импортировано.
Завершён импорт Маарду. 3776 адресов импортировано.
Завершён импорт Раквере. 3592 адресов импортировано.
Завершён импорт Тарту. 2355 адресов импортировано.

Last edited by SviMik (2013-01-13 00:44:46)

AlexTheTux · 2013-01-13 00:44:00

Знаешь, что теперь плохо в центре Таллина?
Были целые кварталы, нарисованные одним домом, на который были хаотично навешены точки с адресами.
Потом я эти кварталы порезал на дома в соответствии со схемой Maa-amet, при этом точки с адресами попали куда-то - не обязательно на тот дом, к которому они должны были принадлежать (когда я резал - у меня не было адресной информации, и эти точки я не двигал - где они были - там, преимущественно и остались).
Потом на контуры домов навесились адреса, и теперь видно, что многие дома имеют адрес на контуре один, а адресная точка с таким адресом стоит на соседнем доме.
Вот один из примеров:
http://www.openstreetmap.org/browse/way/200675327
Рядом есть и другие примеры.
По хорошему, при проставлении адреса на контур дома, надо было убирать точку с адресом с контура или из области, охваченной контуром - потому что те адреса, которые ты сейчас проставляешь, они должны быть более точные (хотя бы тем, что точку можно было поставить весьма неточно, и она часто попадала на площадь соседнего дома, а адрес, срисованный с площади дома в Maa-amet, потенциально более точен).

Еще - вот злосчастная аппроксимация адресов:
http://www.openstreetmap.org/browse/way/48788315
Она задает адреса трем домам - 1, 3, 5
При этом номера проставились на контур только одного дома - среднего, и адрес этот не 3, как можно подумать - а 46_48.
При этом точки с адресами 46 и 48 стоят на соседнем доме (а его контур адреса не получил).
В данном примере я могу предположить, что крайние дома не получили адреса на контуры, потому как находятся в очереди "!" адресов, которую ты заблокировал.
А вот почему такое несовпадение по среднему дому? Может, он на самом деле должен быть 3_48, а его неправильно набили? (где потерялась цифра 3, которая есть в аппроксимации, но нет в данных скрипта?)
Данный пример поднимает вопрос качества вбитых данных - здесь можно заподозрить, что они были вбиты не совсем точно.

===
В общем, по итогам первого импорта, я бы обратил внимание на два момента (до решения этих вопросов - импорт хорошо бы остановить):

- нужно что-то делать с точечными адресами на контуре или внутри него: если точечный адрес совпадает с тем, что ставится на контур - то точку с адресом точно удалять, чтобы не мешалась. А вот если не совпадает - то тут большой вопрос - нужно как-то перевалидировать эти данные (вручную?). В итоге точку все равно убрать, потому что не должно быть дублирующейся адресной информации (на точке и на контуре) - даже если она изначальна не была бы рассинхронизирована (а это не так), то со временем рассинхронизируется обязательно (откуда будущим мапперам знать, какие адреса считать основными?)
(Vitalts вроде грозился как-то точечные адреса подчистить?)
( с другой сторны - такая история с точечными адресами - она, наверное, преимущественно в центре Таллина была - а он первым под импорт пошел. Вообще, его, конечно, нужно было импортировать последним, как самый сложный и наиболее важный - чтобы можно было учесть возможные нюансы. )

- пока писал - второй момент забыл :-)

Last edited by AlexTheTux (2013-01-13 00:57:37)

AlexTheTux · 2013-01-13 00:50:20

А в целом, если смотреть на Мапник (смотрю, например, Тарту) - получилось очень круто.
:-)

SviMik · 2013-01-13 01:12:30

По хорошему, при проставлении адреса на контур дома, надо было убирать точку с адресом с контура или из области, охваченной контуром

К сожалению, я совсем не учёл этот способ адресации...

Запишу в Todo:
Пройтись по всем контурам, и у контуров, у которых есть адрес, снести адрес с точек, входящих в контур.
Но это уже будет другой тип обработки, и надо снова просить разрешения у сообщества

Единственное, с чем не соглашусь - очень плохая идея делать две разных вещи за один импорт.
1. В одном сложном скрипте проще допустить ошибку, чем в двух простых и понятных.
2. В случае ошибки, разгребать последствия гораздо сложнее, когда всё перемешано в одном чейнджсете.

http://www.openstreetmap.org/browse/way/48788315
Она задает адреса трем домам - 1, 3, 5
При этом номера проставились на контур только одного дома - среднего, и адрес этот не 3, как можно подумать - а 46_48.

Весьма забавно. Согласно базе данных адресов, на этот дом (200516986) зарегистрировано аж 8 адресов:

Lai tänav		48
Lai tänav		46
Oleviste tänav		5
Pikk tänav		61
Oleviste tänav		3
Pagari tänav		4
Oleviste tänav		1
Pagari tänav		2

а я выгружал только первые два адреса, данный случай посчитал крайне редким
По количеству адресов на дом статистика сейчас такая:

(количество адресов на дом - количество домов)
1 - 543277 (95.33%)
2 - 12155 (2.13%)
3 - 3058 (0.54%)
4 - 1381 (0.24%)
5 - 1039 (0.18%)
6 - 658 (0.12%)
7 - 501 (0.09%)
8 - 774 (0.14%)
9 - 714 (0.13%)
10+ - 6344 (1.11%)

Last edited by SviMik (2013-01-13 01:16:08)

SviMik · 2013-01-13 03:53:37

Фух, еле затолкал! На всё ушло 6 часов. Сервер OSM жуёт медленно, думает долго, ошибки выплёвывает по одной...
Конфликт версий возникал 27 раз - кто-то трогал сегодня здания, которые я импортировал.
В остальном, импорт прошёл успешно.

Таллинн - 23562 зданий
остальные города - 18427
прочие населённые пункты - 15209
итого: 57198

Импортировалось:
addr:street
addr:housenumber
addr:housenumber2
addr2:street
addr2:housenumber
addr:suburb
addr:city
addr:country=EE
source:addr=Maa-amet 2012
maaamet:ETAK
maaamet:orig_tunnus

Попутно вырезалось:
created_by=xybot

В обработке участвовали:
все здания, у которых не было addr:housenumber или addr:street

Всего зданий в начале обработки:
Пронумерованных: 26425
Непронумерованных: 101410

Прогнозируемое количество после:
Пронумерованных: 83614
Непронумерованных: 44221

Пропущено зданий автоматическим анализом изображения (из-за отсутствия надписей внутри полигона):
40739

Где-то потерялось: 44221-40739=3482 (проанализируем ниже)

-------------

Контроль качества: каждое здание показывалось дважды
Здания, относительно которых не сошлись во мнении: 2633 (пока отправлены в заморозку)
Здания, прошедшие контроль качества: 59912
(порядок номеров в зданиях с двумя адресами при контроле значения не имел)

Из этих 59912:
Не содержащие цифр (всякие "!" и "*", а также пустые значения): 1936 (пока отправлены в заморозку)
Здания, номера которых распознаны, но не нашлось адреса в базе: 779 (пока отправлены в заморозку)

Итого к импорту: 59912-1936-779=57197

Все цифры сошлись, ничего не потерялось.

Last edited by SviMik (2013-01-13 03:57:26)

SviMik · 2013-01-13 13:10:32

Здания, помеченные "!" и "*", если у кого есть желание заняться: http://svimik.com/osm/list_ways_marked.php
3173 шт.

Te*mik · 2013-01-13 13:26:47

Хм... меня направляет на Оманский залив. Похоже, что долгота и широта поменялись местами.

SviMik · 2013-01-13 13:29:33

Поменял местами, пробуй (у меня просто нет JOSM чтобы проверить).

Announcement

#201 2013-01-11 12:57:50

Re: Эстония

#202 2013-01-11 14:17:34

Re: Эстония

#203 2013-01-11 14:30:02

Re: Эстония

#204 2013-01-11 14:34:24

Re: Эстония

#205 2013-01-11 15:02:35

Re: Эстония

#206 2013-01-11 16:22:22

Re: Эстония

#207 2013-01-11 19:53:59

Re: Эстония

#208 2013-01-11 21:35:58

Re: Эстония

#209 2013-01-11 23:20:21

Re: Эстония

#210 2013-01-11 23:42:40

Re: Эстония

#211 2013-01-12 14:27:01

Re: Эстония

#212 2013-01-12 14:38:42

Re: Эстония

#213 2013-01-12 19:46:34

Re: Эстония

#214 2013-01-12 20:26:29

Re: Эстония

#215 2013-01-12 20:41:16

Re: Эстония

#216 2013-01-12 21:22:43

Re: Эстония

#217 2013-01-12 22:43:37

Re: Эстония

#218 2013-01-12 22:46:21

Re: Эстония

#219 2013-01-13 00:44:00

Re: Эстония

#220 2013-01-13 00:50:20

Re: Эстония

#221 2013-01-13 01:12:30

Re: Эстония

#222 2013-01-13 03:53:37

Re: Эстония

#223 2013-01-13 13:10:32

Re: Эстония

#224 2013-01-13 13:26:47

Re: Эстония

#225 2013-01-13 13:29:33

Re: Эстония

Board footer