TWMS - кеширующий тайловый WMS-сeрвер

Komяpa · 2010-01-14 18:01:43

Страница проекта: http://code.google.com/p/twms/
wiki (рецепты по установке): http://wiki.openstreetmap.org/wiki/TWMS

Страница на ohloh: https://www.ohloh.net/p/twms/

Тут - делимся мнениями, рецептами, отзывами.

Last edited by Komяpa (2010-06-13 18:47:49)

kolen · 2010-01-14 18:15:49

Сборка под винду:
http://narod.ru/disk/16906073000/twms-win32.zip.html

Как пользоваться: распаковываем куда-нибудь, запускаем index.exe (да, странное название пока что у бинарника). Кэширует данные он в каталог cache, который находится рядом с экзешником.
По дефолту порт 8080, соответственно пути у WMS будут http://localhost:8080/?layer=...
Можно указать другой порт, запустив с параметром командной строки с номером порта, например index.exe 8888. Можно принимать соединения только с локалхоста, запустив как index.exe 127.0.0.1:8080.

По-идее эта сборка не должна требовать питон и либы, всё уже есть внутри встроенное. Устанавливать ничего не надо.

Собрано из моего форка twms, где интерфейс вебсервера переделан из mod_python, который был в оригинальном twms, на фреймворк web.py. Адрес форка: http://code.google.com/r/incredibleangst-twms-webpy/
В виндовой версии используется встроенный в web.py вебсервер, но web.py по идее поддерживает и другие интерфейсы, например wsgi и fastcgi.

Виндовую версию с экзешниками можно собрать, запустив setup.py py2exe. Для этого потребуются либы: PIL (python-imaging), pyproj и py2exe.

Last edited by kolen (2010-01-14 18:16:37)

coolkaas · 2010-01-14 18:35:16

А если несколько хочется серверов разных? Использовать их по очереди.
Судя по тому, что
"распаковываем куда-нибудь [...] каталог cache, который находится рядом с экзешником."
можно пускать из разных папок разно-настроенные версии? (на разные порты, на разные wms-сервера).
Или я усложнил?

Aleksandr Dezhin · 2010-01-14 18:37:04

Предусмотреть какой-нибудь TTL для кеша желания нет? Или я чего-то не нашел?

Komяpa · 2010-01-14 18:42:38

coolkaas, twms кеширует не wms. он кеширует тайлы. в слоях есть http://127.0.0.1:8080/?layers=yhsat& для яху и http://127.0.0.1:8080/?layers=irs& для IRS.

Hind · 2010-01-14 19:04:45

Нда, а я уже апач настроил :3

Alexandr Zeinalov · 2010-01-14 19:20:39

Краткий мануал по установке twms на Windows XP

Устанавливаем:

apache
python 2.5 (!!! mod_python под python 2.6 не существует)
mod_python для python 2.5
PIL
pyproj

При написании этой инструкции использовались следующие версии:

apache_2.2.14-win32-x86-openssl-0.9.8k.msi
python-2.5.4.msi
mod_python-3.3.1.win32-py2.5-Apache2.2.exe
PIL-1.1.6.win32-py2.5.exe
pyproj-1.8.5.win32-py2.5.exe

Все установки производим с вариантами по умолчанию.

Открываем файл C:\Program Files\Apache Software Foundation\Apache2.2\conf\httpd.conf.
Находим там множество строк, начинающихся с LoadModule. После последней добавляем:

LoadModule python_module modules/mod_python.so

Далее в конец этого же файла дописываем:

<Directory "C:/Program Files/Apache Software Foundation/Apache2.2/htdocs">
    DirectoryIndex index.py
    AddHandler mod_python .py
    PythonHandler index
    PythonDebug on
</Directory>

Скачиваем все файлы от twms отсюда http://twms.googlecode.com/hg/ и кладём в
C:\Program Files\Apache Software Foundation\Apache2.2\htdocs.

Далее правим config.py от twms:

1. Находим и исправляем в начале файла tiles_cache, например, так:

tiles_cache = "d:/twms-cache/"

2. Заменяем пути к *_nxt.jpg, например, в функции FetchIrs:

yh_dead_tile = "C:/Program Files/Apache Software Foundation/Apache2.2/htdocs/irs_nxt.jpg"

Перезапускаем apache в Apache Monitor, который можно запустить через трей.

Для проверки пробуем открыть в браузере:

http://localhost/?layers=irs&bbox=38.2645676,56.1453162,39.4603353,56.8057105&srs=EPSG:4326&width=500&height=499

Ссылка на собственный wms в josm: http://localhost/?layers=irs&

Ссылка на собственный wms в fuzzyselect.py:
"http://localhost/?layer=irs&format=image/jpeg&force=noresize&width=600&bbox=%s,%s,%s,%s"%tuple(bbox)

vespex · 2010-01-17 02:59:29

kolen wrote:

Сборка под винду:
http://narod.ru/disk/16906073000/twms-win32.zip.html
Как пользоваться: распаковываем куда-нибудь, запускаем index.exe (да, странное название пока что у бинарника). Кэширует данные он в каталог cache, который находится рядом с экзешником.
По дефолту порт 8080, соответственно пути у WMS будут http://localhost:8080/?layer=...
Можно указать другой порт, запустив с параметром командной строки с номером порта, например index.exe 8888. Можно принимать соединения только с локалхоста, запустив как index.exe 127.0.0.1:8080.

Замечательная штука, спасибо.

Kuprienko_Viktor · 2010-01-18 03:57:22

Под винду оно, конечно, хорошо. А как бы это счастье на линух водрузить? (ASP_14 , fedora_9)
Апачь уже работает, но не силён я в питонах. :(

Last edited by Kuprienko_Viktor (2010-01-18 03:59:19)

Alexandr Zeinalov · 2010-01-18 09:26:23

Kuprienko_Viktor
поставь mod_python и по аналогии с Windows, там принципиальной разницы нет...

Ezhick · 2010-01-18 09:27:46

А реально заставить его работать через локальный прокси?

Alexandr Zeinalov · 2010-01-18 09:35:07

Реально:

proxies = {'http': 'http://proxyaddress:8080'}
a = urllib.urlopen( url, proxies=proxies )

Ezhick · 2010-01-18 11:09:56

сорри, это куда писать надо?

Upliner · 2010-01-18 11:22:43

Заменить везде обычный urlopen на urlopen с прокси

Last edited by Upliner (2010-01-18 11:51:15)

Kuprienko_Viktor · 2010-01-20 01:09:53

Alexandr Zeinalov wrote:

Kuprienko_Viktor
поставь mod_python и по аналогии с Windows, там принципиальной разницы нет...

Обломался. Скрипт пишет, не могу загрузить pyproj, а я так и не нашел в каком пакете оно прячется. Похоже, ни в каком. Вот в Альтлинукс вовсе отдельный пакет для этого модуля, но для 2.6. Мне он не подходит.

Alexandr Zeinalov · 2010-01-20 08:11:26

Скачай и установи pyproj отдельно...

Komяpa · 2010-01-20 08:47:16

Если работа с TWMS кроме как в josm не предпологается, можно руками выкосить все упоминания pyproj. Он там исключительно для более-менее корректной работы QGIS и друзей.

Kuprienko_Viktor · 2010-01-21 14:55:50

Komяpa wrote:

Если работа с TWMS кроме как в josm не предпологается, можно руками выкосить все упоминания pyproj. Он там исключительно для более-менее корректной работы QGIS и друзей.

Из index.py удавил "import pyproj" и строки:
------------------------------------------------------------------
if srs == "EPSG:4326":
p = pyproj.Proj("+proj=longlat +ellps=WGS84 +datum=WGS84 +no_defs")
elif srs == "EPSG:3395":
p = pyproj.Proj('+proj=merc +lon_0=0 +k=1 +x_0=0 +y_0=0 +ellps=WGS84 +datum=WGS84 +units=m +no_defs')
la1,lo1,la2,lo2 = bbox
la1,lo1 = p(la1,lo1, inverse=True)
la2,lo2 = p(la2,lo2, inverse=True)
bbox = (la1,lo1,la2,lo2)
elif srs == "EPSG:900913":
p = pyproj.Proj('+proj=merc +lon_0=0 +lat_ts=0 +x_0=0 +y_0=0 +a=6378137 +b=6378137 +units=m +no_defs')
la1,lo1,la2,lo2 = bbox
la1,lo1 = p(la1,lo1, inverse=True)
la2,lo2 = p(la2,lo2, inverse=True)
bbox = (la1,lo1,la2,lo2)
----------------------------------------------------------------

Оно? Вроде работает.
Это просто праздник какой-то!

Aleksandr Dezhin · 2010-01-22 19:29:12

С ограничением максимального размера отдаваемого изображения какая-то лажа...

progserega · 2010-01-24 11:01:55

При установке в генте:

Ставим:
www-servers/apache-2.2.14-r1
www-apache/mod_python-3.3.1-r1
dev-python/pyproj-1.8.5
dev-python/imaging-1.1.7

Последний - это и есть PIL.

Ложим в /var/www/localhost/htdocs файлы проекта, взятые с http://twms.googlecode.com/hg/

Патчим конфиг:
mv config.py config.py_def
cat config.py_def|sed "s/\/var\/www\/latlon\/wms/\/var\/www\/localhost\/htdocs/g">config.py

Создаём ди-ю кэша:
mkdir /var/www/localhost/htdocs/cache
chown apache:apache /var/www/localhost/htdocs/cache

В /etc/apache2/httpd.conf добавляем:

LoadModule python_module modules/mod_python.so

<Directory "/var/www/localhost/htdocs/">
DirectoryIndex index.py
AddHandler mod_python .py
PythonHandler index
PythonDebug on
</Directory>

Ребутаем апач:
/etc/init.d/apache2 restart

В случае merkaartor:
Заходим в tools->WMS Servers editor

Для космоснимков:
Пишем имя: localhost-irs
Server URL: http://localhost/?layers=irs&

Для yahoo:
Пишем имя: localhost-yahoo
Server URL: http://localhost/?layers=yhsat&

Жмём "добавить"

Закрываем.

Нажимаем Ctrl+L - в "Карта" выбираем WMS-adapter и любой и localhost-irs или localhost-yahoo.

П.С. Классная штука! Спасибо! А то утомляло на каждый эвент зума ждать по несколько минут...

Alexandr Zeinalov · 2010-01-24 11:13:34

Почему-то все линуксоиды копируют вытягивание файлов с сайта из вининструкции вместо предложения установить mercurial

MatWay · 2010-01-27 21:55:29

Отличная штука!

вот mini-howto по установке в Ubuntu (Jaunty Jackalope) для полных чайников вроде меня :-)

1. устанавливаем необходимые пакеты:
sudo apt-get install apache2 libapache2-mod-python python-pyproj python-imaging mercurial

2. загружаем файлы проекта:
hg clone https://twms.googlecode.com/hg/ twms

3. патчим config.py и копируем файлы туда где их найдет apache
cd twms
mv config.py config.py_def
cat config.py_def|sed "s/\/var\/www\/latlon\/wms/\/var\/www/g">config.py
sudo cp * /var/www/

4. создаём каталог для кэш и устанавливаем на него права:
sudo mkdir /var/www/cache
sudo chown www-data:www-data /var/www/cache

5. в /etc/apache2/httpd.conf добавляем:

LoadModule python_module modules/mod_python.so

<Directory "/var/www/">
DirectoryIndex index.py
AddHandler mod_python .py
PythonHandler index
PythonDebug on
</Directory>

6. перезапускаем апач:
sudo /etc/init.d/apache2 restart

7. Пробуем открыть в браузере:
http://localhost/?layers=irs&bbox=38.2645676,56.5453162,39.6603353,57.1057105&srs=EPSG:4326&width=500&height=499

8. наслаждаемся видом на Плещеево озеро

9. добавляем сервер в настройках wms-плагина в JOSM
http://localhost/?layers=irs&

10. получаем удовольствие :-)

Kuprienko_Viktor · 2010-02-06 16:31:51

Komяpa wrote:

coolkaas, twms кеширует не wms. он кеширует тайлы. в слоях есть http://127.0.0.1:8080/?layers=yhsat& для яху и http://127.0.0.1:8080/?layers=irs& для IRS.

А нельзя ли добавить кэш для Landsat?
Landsat, бывает, довольно тяжко грузится плюс удобно таскать кэш на работу ибо инет там у меня убогий, а времени много - с февраля работаю в режиме простоя.

Last edited by Kuprienko_Viktor (2010-02-06 16:33:36)

Aleksandr Dezhin · 2010-02-06 17:51:22

А нельзя ли добавить кэш для Landsat?

Лучше скачайте интересующие вас сцены и раздавайте их себе mapserver-ом - летать будет + получите более качественную картинку скорее всего + будет возможность манипулировать каналами.

Kuprienko_Viktor · 2010-02-07 02:56:31

Aleksandr Dezhin wrote:

А нельзя ли добавить кэш для Landsat?
Лучше скачайте интересующие вас сцены и раздавайте их себе mapserver-ом - летать будет + получите более качественную картинку скорее всего + будет возможность манипулировать каналами.

Непростая это штука, mapserver. Вразумительных русских манов я к нему не нашел, а английские не осилю - слишком объёмный материал.

Announcement

#1 2010-01-14 18:01:43

TWMS - кеширующий тайловый WMS-сeрвер

#2 2010-01-14 18:15:49

Re: TWMS - кеширующий тайловый WMS-сeрвер

#3 2010-01-14 18:35:16

Re: TWMS - кеширующий тайловый WMS-сeрвер

#4 2010-01-14 18:37:04

Re: TWMS - кеширующий тайловый WMS-сeрвер

#5 2010-01-14 18:42:38

Re: TWMS - кеширующий тайловый WMS-сeрвер

#6 2010-01-14 19:04:45

Re: TWMS - кеширующий тайловый WMS-сeрвер

#7 2010-01-14 19:20:39

Re: TWMS - кеширующий тайловый WMS-сeрвер

#8 2010-01-17 02:59:29

Re: TWMS - кеширующий тайловый WMS-сeрвер

#9 2010-01-18 03:57:22

Re: TWMS - кеширующий тайловый WMS-сeрвер

#10 2010-01-18 09:26:23

Re: TWMS - кеширующий тайловый WMS-сeрвер

#11 2010-01-18 09:27:46

Re: TWMS - кеширующий тайловый WMS-сeрвер

#12 2010-01-18 09:35:07

Re: TWMS - кеширующий тайловый WMS-сeрвер

#13 2010-01-18 11:09:56

Re: TWMS - кеширующий тайловый WMS-сeрвер

#14 2010-01-18 11:22:43

Re: TWMS - кеширующий тайловый WMS-сeрвер

#15 2010-01-20 01:09:53

Re: TWMS - кеширующий тайловый WMS-сeрвер

#16 2010-01-20 08:11:26

Re: TWMS - кеширующий тайловый WMS-сeрвер

#17 2010-01-20 08:47:16

Re: TWMS - кеширующий тайловый WMS-сeрвер

#18 2010-01-21 14:55:50

Re: TWMS - кеширующий тайловый WMS-сeрвер

#19 2010-01-22 19:29:12

Re: TWMS - кеширующий тайловый WMS-сeрвер

#20 2010-01-24 11:01:55

Re: TWMS - кеширующий тайловый WMS-сeрвер

#21 2010-01-24 11:13:34

Re: TWMS - кеширующий тайловый WMS-сeрвер

#22 2010-01-27 21:55:29

Re: TWMS - кеширующий тайловый WMS-сeрвер

#23 2010-02-06 16:31:51

Re: TWMS - кеширующий тайловый WMS-сeрвер

#24 2010-02-06 17:51:22

Re: TWMS - кеширующий тайловый WMS-сeрвер

#25 2010-02-07 02:56:31

Re: TWMS - кеширующий тайловый WMS-сeрвер

Board footer