osm.sbin.ru/stat недоступен несколько дней

Уже несколько дней подряд папки со свежей статистикой недоступны - выдают 403 Forbidden. Настройте права правильно, пожалуйста.

Fixed

Снова та же проблема.

Разрослась Россия, памяти перестало хватать окончательно…

В статистике нет Тувы, хотя Гис-Лаб её нарезает. Включите, пожалуйста.

К вас что, вся XML’ка в память засасывается для парсинга что 3GB не хватает? Не надо так делать.

Кстати, нет Ненецкого АО.

Добавил следующие регионы:

Камчатский край
Магаданская область
Ненецкий автономный округ
Республика Алтай
Чукотский автономный округ

Завтра они попадут в статистику.

Что касается всей России, то в память кладётся не XML, а изучаемые статистикой объекты.

отлично! Как раз хотел про Алтай написать. Спасибо!

Посчитал Россию от 2010.12.03. На вычисления потребовалось двое суток, так что это разовая акция :slight_smile:

Для сравнения:

Статистика от 28 октября:
Последняя правка: 2010-10-26T23:36:37Z

Што?

А пофиг, зато прибавили пару миллионов точек. :)))

11 значащих цифр! Это сильно.

Последняя правка вечером 26 октября. Дамп России появляется на следующий день, а потом в следующую ночь (уже 28 октября) обсчитывается.

1 Like

Александр, не могли бы вы немного поменять шаблон страниц и начать подгружать скрипт для таблиц не с сайта Котяры, а со своего?

Сегодня заметил, что статистика грузится очень медленно. Включил в Опере DragonFly, оказалось, что дело из-за файла
http://me.komzpa.net/sorttable.js,
который загружается несколько секунд, а до загрузки вместо содержимого страницы виден только белый экран.

Поправлю.

Обновил Россию ещё раз, на этот раз на машине с 12 Гб памяти, поэтому вычисление заняло всего час с копейками. За полмесяца в России нарисовали более миллиона точек :slight_smile:

У меня есть машина с 8GB и ~раз в неделю (но иногда чаще) обновляющимся дампом России; может вам там эту страницу генерить? У меня там есть пачка собственных скриптов для статистики и графиков крутятся.

PS. А хотя не, там же наверное postgres нужен со всей историей.

Обновление дампа России проблемы не представляет - это лишь вопрос скачивания файла размера ~400 Мб. Больше проблем с самой генерацией - в процессе оно съедает уже почти 7 Гб памяти, и swap процессу не поможет - потому что многие часы (в моём случае при 4 Гб физической памяти было затрачено ~45 часов) будет потрачено на перемещение памяти туда-сюда.

Postgres там не нужен, всё читается из xml.

чё то не обновляется Last update: 2011-01-02T22:56:30Z

Это не дата обновления, а дата последней известной правки. Судя по времени, указанный апдейт вероятнее всего сделан из дампа, сделанного в полночь 3 января.