Комментарии на сайте U.F.M's Homepage

Комментарий к записи Птсо ненависти (Аноним)

Аноним — Mon, 30 May 2011 12:41:06 +0000

Пидары — это слишком мягко сказано, я в Кировоградской области живу в селе, просто нет возможности подключиться к другому оператору а кабель не реально, атс старая, заметил что на ночном безлиме скорость держат суки только примерно до часа ночи, потом обрубают и опять включают уже часов в пять-шесть утра, за ночь короче метров 300-400 скачать можно не более, а вот уже неделю выйти в сеть с 8 утра до 16 часов не реально вообще то-есть подключиться можно но страницу загрузить — фига…

Комментарий к записи (Fyodor Ustinov)

Fyodor Ustinov — Fri, 29 Apr 2011 04:14:05 +0000

Ну, собственно, никто не мешает поставить какой нибудь свой поисковик и натравить.

Комментарий к записи (CDPlayer)

CDPlayer — Fri, 29 Apr 2011 00:51:24 +0000

Вот ещё бы поисковичок по всем им сразу, так цены бы не было! :)

Комментарий к записи «…хоть сама ложись» (lugoblin)

lugoblin — Tue, 26 Apr 2011 13:35:11 +0000

> Про «0″ копий, честно говоря, не понял
Когда система (мастер вместе с нодами) запускается, то chunkserver’ы становатся доступны не все одновременно а с неким разбросом. Соответственно, есть такой момент когда chunkserver на данной ноде уже поднят, но файловая система полностью ещё недоступна: есть файлы с нулевым количеством копий. Надо этот момент отследить и подождать пока не встанет в строй достаточное количество chunkserver’ов чтобы пользоватся подмонтированной файловой системой без ограничений. После этого запускать сервисы и пытаться делать что-то осмысленное.

> знать какой чанк к какому файлу относится
Логи рапортовали битые чанки, хотелось узнать каким файлам надо сделать mfsfilerepair.

> гластер как раз подйдёт
Угу, надо будет на него ещё раз посмотреть.

Комментарий к записи «…хоть сама ложись» (Fyodor Ustinov)

Fyodor Ustinov — Tue, 26 Apr 2011 03:58:31 +0000

Про «0″ копий, честно говоря, не понял.
Зачем нужно знать какой чанк к какому файлу относится — тоже не понял, но может просто из-за того что у меня задачи совершенно другие.

Кстати, судя по всему тебе гластер как раз подйдёт. Я пока тестировал научился подсовывать гластеру новый сервер так, что-бы он его подцепил уже с существующими там файлами.

А бум — есть. Просто каждый лепит своё примерно с одним и тем-же функционалом и похожими граблями.

http://en.wikipedia.org/wiki/List_of_file_systems#Distributed_file_systems — список не слабый.

Комментарий к записи «…хоть сама ложись» (lugoblin)

lugoblin — Tue, 26 Apr 2011 03:43:58 +0000

Я, может быть, невнимательно читал доки, но я не нашёл способа сделать несколько достаточно тривиальных вещей:
Узнать из скрипта, сколько файлов находятся в состоянии «0 копий» (чтоб определить что FS готова и уже можно грузить сервисы).
Узнать, на какой файл приходится заданный chunk (через find спрашивал какой chunk соотвтствует каждому файлу и сравнивал с искомым chunk’ом, кашмар).

Несколько раз отдельные chunkserver’a отваливались с ошибкой на счёт рассинхронизации (точную цитату не дам, упустил, лог из tmpfs улетучился). Как диагностировать непонятно. Не нашёл ничего лутшего как удостовериться что валидных копий достаточно и реинициализировать chunkserver.
Мелкие захардкодированные глюки в дебиановских скриптах запуска.

Впечатление что MooseFS надо как следует допилить. Особенно обвязку, а то на что это похоже, что диагностика через CGI детальнее чем из консоли. А ещё у ихнего провайдера мой релей почему-то в чёрном списке.

«Лучшее из худшего» это именно то. У меня задача несколько странная, кластер типа числогрыз, предполагается что каждая нода будет и сервером и клиентом файловой системы, и чтобы их можно было на ходу претыкать. Если бы не потребность «жонглировать» хранилищами, я бы повнимательнее на GlusterFS посмотрел…

В ЕЖ писали про бум распределённых файловых систем. Может, мы где-то не там ищем?

Комментарий к записи «…хоть сама ложись» (Fyodor Ustinov)

Fyodor Ustinov — Fri, 22 Apr 2011 02:54:09 +0000

Угу, снял трансляцию.

Ну в виде «вишлиста» оно везде есть. Но нигде не реализовано.

На финишную прямую вышли MooseFS, ceph и GlusterFS. Как обычно — у каждого свои заморочки, так что выбирать приходится на уровне «лучшее из худшего».

А как именно дуркует MFS? Потому-что я сильно склоняюсь в её сторону.

Комментарий к записи «…хоть сама ложись» (lugoblin)

lugoblin — Fri, 22 Apr 2011 01:38:48 +0000

Этого поста в LJ не видно. Уже не транслируется?

> бывают еще RAID5/6 как минимум
Я видел упоминание RAID5 в контексте wishlist, кажется, у Lustre и GlusterFS.

Как там у вас с выбором файловой системы, не поделитесь ли? А то MooseFS у меня немножко дуркует и постепенно становится неуютным.

Комментарий к записи Всё таки привычка ходить по глубого закопанным граблям никуда не делась. (Fyodor Ustinov)

Fyodor Ustinov — Thu, 14 Apr 2011 16:16:11 +0000

Видел. Сакрального смысла так и не понял, только если у людей уже была инфраструктура под люстрой и они решили её не ломать.

Комментарий к записи Всё таки привычка ходить по глубого закопанным граблям никуда не делась. (Александр Суворов)

Александр Суворов — Thu, 14 Apr 2011 16:07:10 +0000

А, сорри, че-то тормознул.

Приколись, как народ заворачивает поверх ceph-а еще люстру, правда результат должен поражать скоростью и отказоустойчивостью :)

Комментарий к записи Всё таки привычка ходить по глубого закопанным граблям никуда не делась. (Fyodor Ustinov)

Fyodor Ustinov — Thu, 14 Apr 2011 13:01:33 +0000

Саш, ну ты-же откуда-то цитату взял? :)

Комментарий к записи Всё таки привычка ходить по глубого закопанным граблям никуда не делась. (Александр Суворов)

Александр Суворов — Thu, 14 Apr 2011 12:19:34 +0000

а чего?

Комментарий к записи Всё таки привычка ходить по глубого закопанным граблям никуда не делась. (Fyodor Ustinov)

Fyodor Ustinov — Thu, 14 Apr 2011 12:16:55 +0000

Это журнал не файловой системы.

Комментарий к записи Всё таки привычка ходить по глубого закопанным граблям никуда не делась. (Александр Суворов)

Александр Суворов — Thu, 14 Apr 2011 10:15:24 +0000

цитата:

it’s OSD on ubuntu 11.04 beta (sic!).
ext2 (sic!!)
and journal on tmpfs (sic!!! :)

FS mounted by

/dev/md0 /mfs ext2 rw,noatime,nodiratime,async,noexec,nodev,user_xattr 0 0

====

Феда, объясни, я не въезжаю, как ты добился работы журнала когда fs смотрирована как ext2? все мои источники утверждают, что ext2 не поддерживает журнал.

Комментарий к записи ICQ всё (Roman Stepanchuk)

Roman Stepanchuk — Wed, 13 Apr 2011 13:51:08 +0000

Они наконец-то усрались, сделались открытыми для сторонних клиентов.
Как раз когда почти все слезли.

Комментарий к записи ICQ всё (Fyodor Ustinov)

Fyodor Ustinov — Mon, 28 Feb 2011 23:07:18 +0000

Ну не то что бы перешел — оставил gtalk и msn.
Скайпом я пользуюсь обычно только когда мне надо за границу звонить.

Комментарий к записи ICQ всё (Oлег)

Oлег — Mon, 28 Feb 2011 18:26:14 +0000

На что перешел? Мне вот скайп, например, тоже не очень нравится — сообщения часто не додходят

Комментарий к записи ICQ всё (Fyodor Ustinov)

Fyodor Ustinov — Thu, 24 Feb 2011 21:11:06 +0000

Везука.

Комментарий к записи ICQ всё (dimas)

dimas — Thu, 24 Feb 2011 21:10:06 +0000

да лааадно, с НГ, наверное, не замечал …

Комментарий к записи ICQ всё (Fyodor Ustinov)

Fyodor Ustinov — Thu, 24 Feb 2011 21:08:51 +0000

Глюками.