You are not logged in.

Announcement

*** NOTICE: forum.openstreetmap.org is being retired. Please request a category for your community in the new ones as soon as possible using this process, which will allow you to propose your community moderators.
Please create new topics on the new site at community.openstreetmap.org. We expect the migration of data will take a few weeks, you can follow its progress here.***

#51 2011-10-08 10:24:16

!i!
Member
Registered: 2009-11-28
Posts: 3,313
Website

Re: Tiles Downloader bremsen Server aus


privater Account von KVLA-HRO-Mei

Offline

#52 2011-10-08 14:59:31

!i!
Member
Registered: 2009-11-28
Posts: 3,313
Website

Re: Tiles Downloader bremsen Server aus

Ich wurde gebeten, das hier von menion (Autor von Locus) zu überbringen:

current (already done) steps:
--------------------
1. today I'll release new version 1.3.4
2. direct downloading from openstreemap.org server will be disable. I'll leave only viewing and caching data. This should reduce locus to only some mobile viewer
3. today I finished "new" vector maps, (update that finally cover whole planet) so I hope that many users will use them
4. I also moved MapQuest server on first place in list of maps, this should also help to reduce using of OSM classic server
5. And finally I donated amount that at least should cover some damage done due to enormous numbers of users

plans:
------------
1. I was yesterday playing for whole day with mapnik, openlayers, mod_tile and some other stuff and even when I never did something like this, seems it should work (I have already simple map of Czech republic in Locus from own server ... nice), so I decided that I'll create own tile server that will move completely all trafic from osm classic server to this (only for locus) server. One my friend is more experience with these server stuff so I'll meet him in monday and hope that we should start work on this soon ...

http://forum.asamm.cz/viewtopic.php?f=1 … 6874#p6870

Darüber hinaus ging das hier über TALK von den Entwicklern von OpenMaps

Dear OSMers,

we, the developers of OpenMaps, wrote a blog post about OpenMaps
getting blocked by OpenStreetMap Mapnik tile servers:
http://blog.izeize.com/2011/10/openmaps … etmap.html

For convenience I pasted the whole text of the blog post below:

Earlier this week it came to my attention that OpenMaps' access was
blocked to the OpenStreetMap "Mapnik" tile servers.

We suspect that the reason why it was blocked is a tool named the
Download tool. The Download tool enables users to download an area of
a map from a given map tile server, even custom ones. Users were using
this tool to download map tiles from the OpenStreetMap "Mapnik" tile
servers and with this behavior they were violating the tile usage
policy of OpenStreetMap.

We are very sorry for causing such a problem for the OpenStreetMap
project. To our defense, the tile usage policy wasn't available when
we first introduced the Download tool in OpenMaps.

Today we submitted an updated version (v4.5.4) of OpenMaps to the App
Store and are waiting for approval from Apple. The following
modifications were made to the app:
- Download tool is still present with a clear discouraging message
that it should not be used in abusive behavior.
- Maximum of 2 download threads.
- Download disabled for 17, 18 and 19 zoom levels.
- User agent of non-bulk downloading of map tiles was changed to
"Op3nMaps(Not.Bulk.Download)/x CFNetwork/x Darwin/x" while the user
agent for bulk downloading remains unmodified (OpenMaps/x CFNetwork/x
Darwin/x).

This way browsing and bulk downloading users can clearly be identified
on the server side and throttled or banned if necessary.

This is our short term solution for the problem, but the long term
solution is clearly a vector based renderer. I previously alluded that
it is coming on my twitter profile.

http://lists.openstreetmap.org/pipermai … 60336.html

Darüber hinaus hat mit Markus (NaviComputer) zurückgemailt und auch dort wurden einige Veränderungen vorgenommen

...
Nun noch etwas zum Tiledownload in NaviComputer. Um übermäßigen Traffic
zu vermeiden, habe ich (trotz beschwerden vieler User) bereits vor
längerer Zeit diverse Maßnahmen getroffen:
- Die Downloadgeschwindigkeit ist gedrosselt sowie die Anzahl der
parallelen Verbindungen auf 2 reduziert.
- Die Downloadgröße/Region einer Karte ist limitiert. In den Zoomstufen
17 und 18 können dadurch nur sehr kleine Gebiete heruntergeladen werden.
- Auf eine Update-Funktion habe ich verzichtet. Der gewöhnliche
NaviComputer User lädt sich einmal eine Karte seiner Region herunter und
verursacht danach nie wieder Traffic. Von anderen Anwendungen kenne ich
es, dass die Karten immer wieder automatisch aktualsiert werden.
- Auf der NaviComputer findest du an allen Ecken Hinweise an die User,
unnötige Downloads und vor allem Downloads hoher Zoomstufen (für die
meisten Anwendungen reicht Stufe 15) zu vermeiden.
...


privater Account von KVLA-HRO-Mei

Offline

#53 2011-10-18 16:08:54

g0ldfish
Member
Registered: 2009-04-27
Posts: 293

Re: Tiles Downloader bremsen Server aus

maxbe wrote:

Vorsicht, wenn Du beim Testen Deines Caches für die ersten paar Kacheln an einem Proxy denkst...

Danke für die Warnung! Werde entsprechend vorsichtig sein.

maxbe wrote:

Ausserdem glaube ich auch, dass die durchschnittliche Openlayers-Seite eher wenig zum Gesamtverbrauch beiträgt...

Ja, das ist sicher wahr, aber andererseits möchte ich OSM-Karten auf viel, viel mehr und auch stärker besuchten Websites sehen als derzeit und würde das gern auch bewerben, wo immer ich kann.

Offline

#54 2011-10-18 16:38:47

viw
Member
Registered: 2010-05-15
Posts: 2,623

Re: Tiles Downloader bremsen Server aus

g0ldfish wrote:

Ja, das ist sicher wahr, aber andererseits möchte ich OSM-Karten auf viel, viel mehr und auch stärker besuchten Websites sehen als derzeit und würde das gern auch bewerben, wo immer ich kann.

Du kannst doch gerne OSM bewerben. Allerdings solltest du im gleichen Atemzug darauf hinweisen, dass man seine eigenen Tiles rendern kann und so keine fremden Server belastet:
Linux http://forum.openstreetmap.org/viewtopic.php?id=13983
Windows http://wiki.openstreetmap.org/wiki/User:Ajoessen

Offline

#55 2011-10-18 17:50:54

EvanE
Member
Registered: 2009-11-30
Posts: 5,716

Re: Tiles Downloader bremsen Server aus

viw wrote:
g0ldfish wrote:

Ja, das ist sicher wahr, aber andererseits möchte ich OSM-Karten auf viel, viel mehr und auch stärker besuchten Websites sehen als derzeit und würde das gern auch bewerben, wo immer ich kann.

Du kannst doch gerne OSM bewerben. Allerdings solltest du im gleichen Atemzug darauf hinweisen, dass man seine eigenen Tiles rendern kann und so keine fremden Server belastet: Linux ..., Windows ...

Der eigene Render-/Tile-Server hat zudem den Vorteil, dass man die Auswahl und Darstellung nach eigenen Bedürfnissen gestalten kann. Das kann je nach Thema einer Webseite ein entscheidender Vorteil gegenüber anderen Map-Servern sein.

Also erst mal den Render-/Tile-Server mit Standard-Stil aufsetzen. Das geht mit überschaubaren Aufwand.
Dann kann man sich überlegen, ob und wie man für die eigenen Zwecke die Auswahl/Darstellung optimieren kann.
Das zweite erfordert wahrscheinlich viel experimentieren und damit Zeit.

Edbert (EvanE)

Offline

Board footer

Powered by FluxBB