Вы здесьВопрос к линуксоидам
Опубликовано пн, 09/11/2009 - 00:30 пользователем larin
Как определить, берётся ли файл из кэша или с диска? Точнее, нужен список файлов, за, скажем, час, которые читались с диска. Те, которые брались из кэша - не интересуют.
|
Вход на сайтПоиск по блогам и форумамUser menuПоследние комментарии
Океана RE:Подайте бедному копеечку на книжку с литреса... 4 часа
Саша из Киева RE:Подвиг героев - судьба страны. МНР: люди и годы 2 дня commodore RE:Письма 1 неделя Саша из Киева RE:Три минуты истории 1 неделя nehug@cheaphub.net RE:Как бы с этим побороться и побороть? 3 недели Саша из Киева RE:Книги на латышском языке 3 недели stevecepera RE:Список современных французских писателей? 1 месяц etorus2008 RE:Отв: Помогите найти книгу по описанию 1 месяц lemma7 RE:Чёрный нимб и другие истории, исполненные неизъяснимого ужаса 1 месяц Wedmak RE:Помогите найти!.. #2 1 месяц sem14 RE:Координация сканирования и вычитки 1 месяц babajga RE:Кто сможет раздобыть и оцифровать нужные мне книги? 1 месяц Isais RE:Мои открытия 1 месяц kopak RE:О группе Дятлова. О той самой, того самого... 1 месяц A5. RE:Не присылает пароль на почту 2 месяца babajga RE:Плюмаж 2 месяца babajga RE:Блошкинс и Фрю. Опасное путешествие 2 месяца alexk RE:Багрепорт - 2 2 месяца Впечатления о книгах
nik_ol про Луганцева: Бесплатный сыр для второй мышки [litres] (Иронический детектив, Детективы: прочее)
12 06 Хочу новое! Если есть, выложите, плииз. ) Оценка: хорошо
alexk про Карнеги: Как сделать свою жизнь легкой и интересной (Психология, Самосовершенствование, О бизнесе популярно, Управление, подбор персонала)
12 06 Новая работа? Карнеги умер 70 лет назад!
Barbud про Каталкин: Несознательный (Альтернативная история, Попаданцы, Самиздат, сетевая литература)
11 06 Кое-как домучил первую часть, за вторую, наверное, не возьмусь. Скучный производственный роман, причем абсолютно "безлюдный" - в книге нет ни одного живого человека, только какие-то юниты безмысленные и безэмоциональные. Автору ……… Оценка: плохо
Lora про Алмазов: Лекарь Его Величества (Боевая фантастика, Фэнтези, Самиздат, сетевая литература)
11 06 Поставлю неплохо. Мери Сью В мужском обличии. Роялей столько, что кустов не видать. Но что-то в этом есть. Оценка: неплохо
miri.ness_ про Ерофеев: Великий Гопник. Записки о живой и мертвой России (Современная проза, Контркультура)
11 06 Если человек не может обойтись без табуированных слов, так или иначе относящихся к процессу размножения, он жалок ничтожен; должен быть подвергнут кровавой экзекуции плетьми с последующим остракизмом - белых мишек кормить. Оценка: нечитаемо
Sello про Каневский: …а бес в ребро! (Современная проза)
11 06 Не очень, и даже - очень не очень. Автор "Тэзы", действительно известного в свое время и смешного произведения, похоже, исписался. Повторение мыслей - через страницу, нестыковки (герой, например, собирающейся разводиться с ……… Оценка: плохо
awas про Ольга Оборзевшая (Тонина)
10 06 Тонина с Афанасьевым всегда были склонны к мрачному юмору, а тут в самом начале книги почти открытым текстом разъяснили, что пишут пародию. Да и администрация ЛибРусЭк совсем уж открытым текстом написала «Юмористическая фантастика, ………
Sello про Фурцева: «Я плачу только в подушку». Откровения «первой леди СССР» [litres] (Биографии и Мемуары)
10 06 Какое-то неоднозначное впечатление оставило чтение этого текста. С одной стороны, понимаешь, что человек пишет с явной целью "отметиться" для последующих поколений (о чем сама Фурцева в конце записей признается), потому - ……… Оценка: неплохо
decim про Фёдор Олегович Ковалов
10 06 Быт и люди психбольницы во имя Св. Николая, она же Пряжка. Рисунки автора. Хорошо. Господа цензоры, замазанные вами слова только подогревают интерес малолетних - взрослые давно узнали и миновали - к известным темам.
udrees про Вальтер: Стадия Уныния (Боевая фантастика, ЛитРПГ, Самиздат, сетевая литература)
10 06 Мрачная писанина про приключения попаданца-маньяка в мир какой-то изуверской игры на выживание. Персонаж у нас антигерой, отрицательный типок, любящий кровь и убийства. Сама книга написана простым языком, без особых описаний. ……… Оценка: неплохо
udrees про Вальтер: Генетический потенциал (Боевая фантастика, Космическая фантастика, Постапокалипсис, Самиздат, сетевая литература)
10 06 2-я книга про жизнь бывшего уголовника на неизвестной планете, где его посвятили в тайну жизни планеты. В общем сюжет круто меняется во второй книге, и то, что кажется понятным в начале книги, в конце полностью меняется на ……… Оценка: неплохо
udrees про Вальтер: Среди нас 1 (Боевая фантастика, Приключения: прочее, Постапокалипсис, Самиздат, сетевая литература)
10 06 В общем то годное произведение, написано даже кажется лучше чем большинство других от Макса Вальтера, а то у автора какая-то тяга к описаниям приключений всякой мрази, маньяков-убийц, антигероев. Здесь же повествование идет ……… Оценка: неплохо |
Комментарии
Отв: Вопрос к линуксоидам
Может вам просто помочь с оптимизацией раздачи файлов?
А так просто на логи накатить любой анализатор логов который выдаст список самого популярного, а так с сервера с 5 винтами я выжимаю до 800 мегабит на 500-700 одновременных коннектов.
Отв: Вопрос к линуксоидам
5 винтов SAS или обычных SATA?
что-то у меня два сата тянут не больше ста, и то с трудом.
Может потому, что миллион мелких файлов.
Отв: Вопрос к линуксоидам
а last-access-time разве не поможет? ИМХО, если файл читался с диска - время обновится, если из кеша - останется прежним
Отв: Вопрос к линуксоидам
Кстати, а чей именно кеш имеется в виду ? У файловой системы - свой, у Apache|Squid - свои, и вот их-то cache hits вполне можно увидеть в соответствующих логах.
Отв: Вопрос к линуксоидам
Есть мнение, что здесь скорее nginx.
А он, по моим ощущениям (основанным на достаточно беглом знакомстве) документирован... несколько хуже Индейца.
Отв: Вопрос к линуксоидам
Только вот... Сбор такого рода статистики --- дело небыстрое и весьма ресурсоёмкое.
У меня же здесь к тов. Ларину немного другой вопрос: какая файловая система используется? Параметры файловой системы стандартные/умолчательные или она уже оптимизировалась под конкретную ситуацию (с учётом величины нагрузки --- необходимо).
Отв: Вопрос к линуксоидам
Для начала неплохо бы посмотреть какая именно софтина читает файлы. Если просто логически - там что кэш сопоставим с размером диска? Вряд ли, а значит в кэше файлов принципе мало.
Отв: Вопрос к линуксоидам
Боюсь что здесь дело в тонкой настройке нгинкса для отдачи файлов.
Юзаю файловую систему xfs, она куда адекватнее работает чем екст3 в некоторых моментах.
От сасов отказался, в силу того что на бесплатном софте могу поиметь большую производительности с сата дисков, да и объемы данных у меня внушительные, ну а так есть файлопомойка с музыкой там тоже куча мелких файлов.
Отв: Вопрос к линуксоидам
Радикально может решить вопрос io дискового только 10й райд. Лучше всего если это будет 6 рабочих дисков + спер диск.
В принципе файлохранилище может быть расположено в отдельном сервере и выделенным гигабит линком подключено в сервер раздающий контент.
Или на этом отдельном сервере живет акселерирующий прокси и объема дисков достаточно что бы закешировать все, а записи книг (на чтение и выкачку) сделаны максимально дружественными к кешированию.
--------------------
Пока писал пришел на ум вариант с SSD диском на который надо залинковать все файлы которые в топе или вообще все (если оно лезет :). На hd оставить только логи и базу, вообщем часто меняющуюся информацию. SSD имеет ноутбучный формат и влезет в корпус :).
Отв: Вопрос к линуксоидам
на опеннете указали на:
---8<-----
http://sourceware.org/systemtap/
в частности http://sourceware.org/systemtap/examples/io/iostats.stp
---8<-----
Отв: Вопрос к линуксоидам
Варианты замечательны своей радикальностью.
Не то чтобы они не приходили мне в голову.
Но как-то не готов я вбухивать десятки тысяч евро в железо.
Нет у Либрусека таких доходов, увы.
Пришлось решать проблему более бюджетными способами - добавил диск и памяти в соседний сервер и перенёс туда часть файлов.
Полегчало.