You are not logged in.

#1 2010-05-07 09:04:24

EvgeniMakarov
Member
Registered: 2010-04-14
Posts: 15

Треки DorogaTV для прорисовки дорог в России

Добрый день всем,
DorogaTV аггергирует треки с нескольких тысяч транспортных средств каждый день, для того чтобы строить карты пробок
городов.
мы попробовали сделать автоматическую аггрегацию обезличенных треков, для того чтобы коммьюнити OSM использовало треки для лучшей прорисовки дорог в России.
первые треки доступны здесь:
http://www.openstreetmap.org/traces
от пользователя dorogatv
мы хотим получить фидбеки для того чтобы сделать этот процесс максимально качественно.

Offline

#2 2010-05-07 09:10:29

Aleksandr Dezhin
Member
From: Msk
Registered: 2008-05-25
Posts: 2,109
Website

Re: Треки DorogaTV для прорисовки дорог в России

Спасибо!
Желательно выставить видимость: идентифицируемый.


[ Проверка границ и НП | Дампы | Валидатор рек | Кое-что ещё ]
- Нет! Не надо пытаться. Делай. Или не делай. Не надо пытаться. (c) Йода

Offline

#3 2010-05-07 09:10:51

Hind
Member
From: Moscow
Registered: 2009-05-25
Posts: 3,950

Re: Треки DorogaTV для прорисовки дорог в России

Проще говоря, здесь: http://www.openstreetmap.org/user/doroga%20tv/traces
Фидбек будет. wink
Но какие-то они странные - 1 точка, 28 точек... o_O

Offline

#4 2010-05-07 09:12:18

Calibrator
Member
From: Интернет
Registered: 2009-08-19
Posts: 893

Re: Треки DorogaTV для прорисовки дорог в России

Вернее треки от пользователя "Doroga TV", похоже здесь: http://www.openstreetmap.org/user/doroga%20tv/traces
Похоже это Нижний Новгород.
PS: пока  писал - HIND опередил на 1.5 минуты smile

Last edited by Calibrator (2010-05-07 09:20:02)

Offline

#5 2010-05-07 09:17:19

Aleksandr Dezhin
Member
From: Msk
Registered: 2008-05-25
Posts: 2,109
Website

Re: Треки DorogaTV для прорисовки дорог в России

Еще, если это возможно, то неплохо бы в тегах указать что это за маршрут - тип, номер, и т.д. тогда можно будет попробовать как-то автоматизировать отрисовку этих маршрутов.


[ Проверка границ и НП | Дампы | Валидатор рек | Кое-что ещё ]
- Нет! Не надо пытаться. Делай. Или не делай. Не надо пытаться. (c) Йода

Offline

#6 2010-05-07 09:53:01

Sandman
Member
From: Нижний Новгород
Registered: 2010-04-20
Posts: 24
Website

Re: Треки DorogaTV для прорисовки дорог в России

На самом деле, треки у нас есть не только по Нижнему Новгороду. И далеко не всегда они от маршрутного транспорта.

Сейчас бОльшая часть работы по выгрузке треков в OSM осуществяется в ручную. Как только окончательно отладим схему, переведём на "автопилот".

Last edited by Sandman (2010-05-07 09:53:32)


DorogaTV

Offline

#7 2010-05-07 09:58:42

EvgeniMakarov
Member
Registered: 2010-04-14
Posts: 15

Re: Треки DorogaTV для прорисовки дорог в России

Aleksandr Dezhin wrote:

Еще, если это возможно, то неплохо бы в тегах указать что это за маршрут - тип, номер, и т.д. тогда можно будет попробовать как-то автоматизировать отрисовку этих маршрутов.

В принципе это возможно, мы хотим импортировать с OSM маршруты и прокладывать по ним схему проезда из т.А в т.В, однако нас не очень устраивает схема, по которой на OSM сейчас принято отрисовывать маршруты. мы сейчас думаем каким образом это сделать более правильно.

Offline

#8 2010-05-07 10:03:40

Sandman
Member
From: Нижний Новгород
Registered: 2010-04-20
Posts: 24
Website

Re: Треки DorogaTV для прорисовки дорог в России

http://forum.openstreetmap.org/viewtopi … 726#p73726
Вот в этот посте я процитировал пост Aleksandr Dezhin. Если маршруты хранить в таком виде, то всё хорошо и понятно.


DorogaTV

Offline

#9 2010-05-07 11:41:00

Hind
Member
From: Moscow
Registered: 2009-05-25
Posts: 3,950

Re: Треки DorogaTV для прорисовки дорог в России

Да, я тоже думал над этим. Такой вариант действительно лучше имеющегося.

Offline

#10 2010-05-07 19:54:16

coolkaas
Member
From: RU, Penza
Registered: 2009-05-28
Posts: 2,391

Re: Треки DorogaTV для прорисовки дорог в России

Всегда старался перечислять веи в порядке следования. Только дважды не включал. Но по крайней мере не свалкой.
Хорошее дело затеяли, мужики! Если на части треков, на которых можно, будет идентификация маршрута, это будет здорово.
Или например надпись: пункт А - пункт Б, грузовик. Тоже было понятно гораздо больше. Что просто грузоперевозка, и соответствующее отношение к треку.

Offline

#11 2010-05-08 14:21:38

EvgeniMakarov
Member
Registered: 2010-04-14
Posts: 15

Re: Треки DorogaTV для прорисовки дорог в России

coolkaas wrote:

Всегда старался перечислять веи в порядке следования. Только дважды не включал. Но по крайней мере не свалкой.
Хорошее дело затеяли, мужики! Если на части треков, на которых можно, будет идентификация маршрута, это будет здорово.
Или например надпись: пункт А - пункт Б, грузовик. Тоже было понятно гораздо больше. Что просто грузоперевозка, и соответствующее отношение к треку.

для общественного транспорта соответствие описано здесь:
http://wiki.openstreetmap.org/wiki/User:Doroga.tv

те по трекам можно рисовать маршруты общественного транспорта

Offline

#12 2010-05-10 19:56:34

doroga tv
Member
Registered: 2010-05-10
Posts: 4

Re: Треки DorogaTV для прорисовки дорог в России

За пару дней скопилось 3 Гб, пока запускаем заливку ручками.
В процессе заливки будем контролировать качество по возможности. Уже сейчас например видно совершенно мусорный трек 000000020000000, надо смотреть что за ерунда ...

Offline

#13 2010-05-10 20:07:53

Ezhick
Member
From: Moscow
Registered: 2008-10-08
Posts: 2,508
Website

Re: Треки DorogaTV для прорисовки дорог в России

Самый простой способ автоматического контроля качества - отсечка треков с очень малым количеством точек. От них обычно толку мало.

Offline

#14 2010-05-11 13:33:45

Alastor
Member
Registered: 2009-07-14
Posts: 234

Re: Треки DorogaTV для прорисовки дорог в России

Уважаемые, посмотрите пожалуйста на это безобразие:
8eeeb5751ed5t.jpg
Как правильно обрабатывать такие треки?
З.Ы. Это еще не самое плохое... http://www.openstreetmap.org/user/dorog … ces/695100

Last edited by Alastor (2010-05-11 13:41:36)

Offline

#15 2010-05-11 13:42:04

Ezhick
Member
From: Moscow
Registered: 2008-10-08
Posts: 2,508
Website

Re: Треки DorogaTV для прорисовки дорог в России

Стоянка автобусов?

Offline

#16 2010-05-11 13:51:38

Aleksandr Dezhin
Member
From: Msk
Registered: 2008-05-25
Posts: 2,109
Website

Re: Треки DorogaTV для прорисовки дорог в России

Треки всякие нужны, треки всякие важны. Бороться этим http://forum.openstreetmap.org/viewtopi … 951#p76951


[ Проверка границ и НП | Дампы | Валидатор рек | Кое-что ещё ]
- Нет! Не надо пытаться. Делай. Или не делай. Не надо пытаться. (c) Йода

Offline

#17 2010-05-13 14:52:25

Aleksandr Dezhin
Member
From: Msk
Registered: 2008-05-25
Posts: 2,109
Website

Re: Треки DorogaTV для прорисовки дорог в России

#osm-ru wrote:

(16:52:02) dezhin: akashihi: а как тебе треки от doroga.tv?
(16:52:50) akashihi: dezhin: у меня многополярное мнение smile С одной стороны их мусоровозы ездят в места, в которые я ещё пару лет не собирался.
(16:53:19) akashihi: с другой стороны создают много шума на популярных улицах
(16:55:48) akashihi: Впрочем пользы от них всё таки больше чем вреда.

Это Калининград.

На счет транспорта, наверное все-таки нужны теги у треков - сейчас никакой возможности выбрать треки по маршруту получается что нет. Или я чего-то не понимаю.


[ Проверка границ и НП | Дампы | Валидатор рек | Кое-что ещё ]
- Нет! Не надо пытаться. Делай. Или не делай. Не надо пытаться. (c) Йода

Offline

#18 2010-05-13 15:45:38

agsochi
Member
From: Сочи
Registered: 2010-02-20
Posts: 537

Re: Треки DorogaTV для прорисовки дорог в России

EvgeniMakarov wrote:

Добрый день всем,
DorogaTV аггергирует треки с нескольких тысяч транспортных средств каждый день, для того чтобы строить карты пробок
городов.
мы попробовали сделать автоматическую аггрегацию обезличенных треков, для того чтобы коммьюнити OSM использовало треки для лучшей прорисовки дорог в России.

Кросавчеги! В Сочи ничего небыло, я писал треки где езил, а сейчас ого-го сколько появилось smile
И похоже что треки от строителей - может такое быть?

Last edited by agsochi (2010-05-13 15:46:49)

Offline

#19 2010-05-13 19:43:48

Alastor
Member
Registered: 2009-07-14
Posts: 234

Re: Треки DorogaTV для прорисовки дорог в России

Ох ребяты, подкинули задачку... Второй день недостающие улицы в Рязани рисую, работа стоит...
Но есть и минус: на весь город уже получается 2 с гаком миллиона точек, JOSM на стареньком P4 с 2-мя гигами оперативы не справляется. Приходится рисовать маленькими частями. Дальше, как я понимаю, будет больше? Как с такой проблемой бороться?

Offline

#20 2010-05-13 19:59:03

Kotelnikov
Member
From: Krasnodar, RU
Registered: 2009-05-07
Posts: 2,854
Website

Re: Треки DorogaTV для прорисовки дорог в России

Alastor wrote:

Как с такой проблемой бороться?

Рисовать частями. smile У меня JOSM весьма подтормаживает на AMD 64 X2 3800+ с 3 гигами оперативки, если загрузить весь Краснодар.


1 000 000 points: 80% complete

Offline

#21 2010-05-13 20:34:19

Upliner
Member
From: Kyiv
Registered: 2008-09-18
Posts: 845

Re: Треки DorogaTV для прорисовки дорог в России

Либо патчить сам JOSM. Надо бы взять отпуск и в срочном порядке допиливать gpxfilter. Мне Рязань нужна wink
Или как вариант: сохранить скачанные треки в gpx и профильтровать какой-нибудь сторонней программкой.

Last edited by Upliner (2010-05-13 20:58:01)


Big cat is watching you

Offline

#22 2010-05-14 06:04:19

Alastor
Member
Registered: 2009-07-14
Posts: 234

Re: Треки DorogaTV для прорисовки дорог в России

Kotelnikov wrote:

Рисовать частями. smile

Частями и рисую. Но если тенденция продолжится, уже и части будут тормозить.

Upliner wrote:

Мне Рязань нужна

Рисую по мере сил smile

Offline

#23 2010-05-14 06:12:35

Aleksandr Dezhin
Member
From: Msk
Registered: 2008-05-25
Posts: 2,109
Website

Re: Треки DorogaTV для прорисовки дорог в России

боюсь я, что сейчас администраторы вопить начнут - 62 млн. точек меньше чем за неделю. покетгисовцы, когда они сказали вам свое фи?

по хорошему нужен плагин для josm, который:
1) кеширует потайлово
2) работает в бекграунде
3) умеет фильтровать по типу и банить треки по отпечатку

ну а дальше можно развивать в стороны:
1) показать смещение
2) где есть треки но нефига не нарисовано
3) фильтровать остановки как-то


[ Проверка границ и НП | Дампы | Валидатор рек | Кое-что ещё ]
- Нет! Не надо пытаться. Делай. Или не делай. Не надо пытаться. (c) Йода

Offline

#24 2010-05-14 07:20:38

Ezhick
Member
From: Moscow
Registered: 2008-10-08
Posts: 2,508
Website

Re: Треки DorogaTV для прорисовки дорог в России

Фи нам сказали быстро, но поскольку мы каждый заливали свое - посчитать сколько было залито к тому моменту - нереально. Показатель - время обработки трека перевалило за 30 минут к тому моменту, такая очередь выстроилась. Вот как-то так.

Offline

#25 2010-05-14 09:06:24

Upliner
Member
From: Kyiv
Registered: 2008-09-18
Posts: 845

Re: Треки DorogaTV для прорисовки дорог в России

Aleksandr Dezhin wrote:

1) кеширует потайлово
2) работает в бекграунде
3) умеет фильтровать по типу и банить треки по отпечатку

Спасибо за идеи! Как раз думал, как решить проблему долгой загрузки, ведь прежде чем фильтровать, треки хотя бы загрузить надо, а 2 млн точек по крайней мере полчаса загружаться будут.
Вот только не совсем понял, что значит "банить по отпечатку"? Для начала планировал просто выделять треки треки под удаление мышкой.


Big cat is watching you

Offline

Board footer

Powered by FluxBB