Вы здесьКак создать зеркалоПоследнее время многие спрашивают, как создать зеркало и что для этого нужно. 3. Модуль librusec. Подробности установки - http://github.com/larin/librusec/blob/master/README. Задавайте вопросы, буду стараться довести этот текст до полной ясности.
|
Вход на сайтПоиск по блогам и форумамUser menuПоследние комментарии
DGOBLEK RE:Подайте бедному копеечку на книжку с литреса... 13 часов
larin RE:Оплатил, но абонемент не отображается 4 дня sd RE:Fishing 4 дня Алексей111111111111 RE:Оплатила,но абонемент не отображается 5 дней sd RE:Доступ 27 6 дней kopak RE:Беженцы с Флибусты 1 неделя Isais RE:Вадим Иванович Туманов - Всё потерять - и вновь начать с... 1 неделя Isais RE:Семейственность в литературе 1 неделя Isais RE:Древний Рим. Подборка книг 1 неделя Саша из Киева RE:"Экс" и "нео": разноликие правые 1 неделя medved RE:Предупреждение: "зеркала" флибусты 3 недели Isais RE:Соседи 3 недели babajga RE:Как сова отправилась в отпуск 1 месяц Саша из Киева RE:Горящие паруса 1 месяц Саша из Киева RE:Подвиг героев - судьба страны. МНР: люди и годы 1 месяц commodore RE:Письма 1 месяц Саша из Киева RE:Три минуты истории 1 месяц nehug@cheaphub.net RE:Как бы с этим побороться и побороть? 2 месяца Впечатления о книгах
Barbud про Панфилов: Старые недобрые времена 1 (Альтернативная история, Приключения: прочее, Попаданцы, Самиздат, сетевая литература)
26 07 Хорошее произведение о российских традиционных ценностях, бережно пронесенных народом через века.
udrees про Лей: Инвазия 2 (Боевая фантастика, Космическая фантастика, Фантастика: прочее, Самиздат, сетевая литература)
26 07 Вторая книга получилась на мой взгляд поскучнее чем первая. Автор уже не скрывает своей аналогии с «Чужими», называет напарницу Рипли, у корабля название «Ностромо», матка, трутни. Но в целом сюжет второй книги почти полностью ……… Оценка: хорошо
udrees про Докинз: Самое грандиозное шоу на Земле [доказательства эволюции] [The Greatest Show on Earth: The Evidence for Evolution ru] (Биология)
26 07 Хорошая книга, написанная доступным языком. Объясняет основные перипетии эволюции, как происходили виды и как они видоизменялись. Я в общем-то в какой-то степени креационист, мне трудно представить как животные сознательно ……… Оценка: хорошо
udrees про Вальтер: Инволюция [СИ litres] (Боевая фантастика, Социальная фантастика, Постапокалипсис, Самиздат, сетевая литература)
26 07 Наркоманский высер. Книга третья про похождения нариков и дегенератов во время апокалипсиса. Везде убийства, разврат, пытки, извращения и мат-перемат. Герои в принципе не могут связать пару слов без мата и оскорблений. Хотя ……… Оценка: неплохо
mysevra про Яворницкий: Том 1. Быт запорожской общины (История, Военная документалистика)
25 07 Монументальный труд. Мне, конечно же, наиболее интересным показался первый том. Оценка: отлично!
mysevra про Далин: Болотный шёлк (Фэнтези)
25 07 Вроде зарисовка, а для кого-то – целая счастливая жизнь. Красиво, как всегда у этого автора. Оценка: отлично!
mysevra про Сапковский: Распутье Воронов (Фэнтези)
25 07 Вот и раскрыта тайна резни в Каэр Морхене. Геральт тут непривычный, этакий большелапый лопоухий щенок, но уже с правильными, узнаваемыми чертами, накось. Прочитала с удовольствием, единственный минус – мало. Оценка: отлично!
OldF про Ангелов: Народный словарь СВО (Документальная литература, Юмористическая проза, О войне, Новелла, Сатира)
25 07 Попытка исторгнуть нечто со спущенными трусами. Потратил пару минут на просмотр предыдущих выс***в, этот точно с диагнозом, неизлечим. Оценка: нечитаемо
Саблезубый Заяц про Герасименко: Огонь сильнее мрака (Юмористическая фантастика, Научная фантастика, Городское фэнтези)
24 07 Почему книга отдельно? Это же из серии "Пневма".
Александр Лагода про Маканин: Удавшийся рассказ о любви [сборник] (Современная проза)
24 07 Файл невалиден. Готовлю замену.
StrelaVV про Карелин: Лекарь Империи. Книга 2 [СИ] (Боевая фантастика, Попаданцы, Самиздат, сетевая литература)
24 07 Первая книга понравилась, продолжение есть - читаю... Оценка: отлично!
Олег Макаров. про Шопперт: КВЖД [СИ] (Альтернативная история, Попаданцы, Самиздат, сетевая литература)
23 07 Забавно. Попаданец не борзеет, даже песен и стихов не ворует из будущего. Прогрессорствует довольно-таки аккуратно в рамках своих возможностей, но без фанатизма. Хотя странно, что школьный учитель физики круто умеет в военизированное ……… Оценка: нечитаемо |
Комментарии
Отв: Как создать зеркало
не многовато места надо? поставил лайти. без акселератора, только кэш. тестирую. ip 217.30.248.157
Отв: Как создать зеркало
Когда на Либрусеке был один диск на 500, чистить его приходилось регулярно.
Сейчас полтора тера, занято заметно больше половины.
Отв: Как создать зеркало
эээ вижу запросы... надо host передавать... проще всего в файл WINDOWS\system32\drivers\etc\hosts
добавить (естественно на время теста)
217.30.248.157 lib.rus.ec
217.30.248.157 lib2.rus.ec
и обращаться по имени lib.rus.ec . на lib2.rus.ec насколько я понял хранятся сами книги
Отв: Как создать зеркало
Ну и что? На первой странице голая "пустая" страница, на остальных (предположим, что они есть, а их...) - 404...
Отв: Как создать зеркало
сервер проверяет Host: читайте выше что делать.
Отв: Как создать зеркало
Ах, он оба имени использует, а я думал любое из... Сейчас протестим...
Отв: Как создать зеркало
опс.. мой сервер похоже блочит настоящий lib.rus.ec ;) первую страницу отдает на остальное 404
Отв: Как создать зеркало
вот именно ;)
Отв: Как создать зеркало
А может быть изменишь имя хоста, на какое отзывается? Пусть будет, например, libnew.rus.ec или libnew2.rus.ec, их и прописываем в хост... Меньше проблем будет...
Отв: Как создать зеркало
без хозяина несмогу... хост передается напрямую. к стати нашел ошибку (опечатку) в конфиге теперь 404 не выдает.
Отв: Как создать зеркало
Теперь подмененный lib.rus.ec у тебя вовсе не отзывается, а подмененный lib2.rus.ec дает начальную страницу со ссылкой на lib.rus.ec.
Отв: Как создать зеркало
всетаки походу блочит изза количиства соединений... уже 3 ip меняю на исходящие соединения.
Отв: Как создать зеркало
Посоветуйте бесплатный хостинг чтобы попробовать на вкус ето дело
Отв: Как создать зеркало
Таких не бывает, но есть такие у которых 30 дней money back guarantee - вот их и ищите. Обычно смотрите на простенькие VPS с линуксом.
Отв: Как создать зеркало
впс с 500Г места - это очень дорого.
Или шаред, или дедик.
Отв: Как создать зеркало
В порядке бреда: а может ли сработать такая конструкция:
Frontend с MySQL и базаданой на относительно быстром, но маленьком VPS, а backend с собственно книжками - на недорогом, медленном но большом shared?
Отв: Как создать зеркало
Не уверен. Много можете вспомнить хостингов, которые дают ~150gb (неплохо бы сейчас), которые в будущем можно еще расширить (либрусек-то растет). Ну и хорошо: процессор вы шареду сильно грузить не будете, но при должной популярности начнете привышать разумные планки по памяти и трафику. Шаред обычно вещь куда менее рентабельная, чем впс, так что вероятность того что вас попрут больше.
Отв: Как создать зеркало
>Много можете вспомнить хостингов, которые дают ~150gb
На шаредах место, как правило, не проблема:
http://www.powweb.com/powweb/hosting.bml
Disk Space (Raid Storage) UNLIMITED
Data Transfer / Bandwidth UNLIMITED
$4.88 / month
Мой микросайтик на них уж много лет живёт. Сервис, конечно, дерьмовенький, и абюзостойкость нулевая, но... а если файлы не напрямую с шареда, а через франтенд отдавать - абюзостойкость шаред бекенда повысится... правда, траффик франтенда тоже повысится...
Отв: Как создать зеркало
Ну и скрипты, кстати, слегка переписать придется. Ибо книги у вас будут где-то там, а запросы "сделайте мне html/txt" видимо будут валиться на основной сервер. Впрочем, тут большой простор для фантазии и все вполне реализуемо.
Отв: Как создать зеркало
Ничего переписывать не надо. На фронте nginx, можно кэшируюший. Все скрипты и книги на основном сервере, но про него никто не знает.
Отв: Как создать зеркало
А при этом не запалятся прямые ссылки на бэкэнд при скачке книг? И поможет ли здесь спрятать основной сервер скачка не "публичным", а "приватным" способом (из настр. друпала)?
Как я понимаю - если на фронте nginx будет только управлять скачкой файла с шареда, то увидеть, откуда тянется файл - нетрудно. На ум призодит единственный способ - если фронт одновременно будет использоваться и как "прокси", сначала он книжку скачивает, зате отдает юзеру (упрощенно) - вы это имеете ввиду?
Отв: Как создать зеркало
да.
Отв: Как создать зеркало
Может.
Отв: Как создать зеркало
Может кто знает, то ткните пальцем, а где взять содержимое "i" и "img"?
Отв: Как создать зеркало
i/ генерится автоматически при парсинге книги.
img/ проще всего стянуть прям с Либрусека:
for i in s1.gif s2.gif zamok.gif znak1.gif znak5.gif znak.gif; do wget lib.rus.ec/img/$i;done
Отв: Как создать зеркало
Илья, открой пожалуйста для скачивания/синхронизации sql.zip с биографиями авторов. Я обсуждал этот вопрос с Buriy, но его уже несколько дней в Сети нету...
Как-то пусто и неуютно зеркало без них смотрится, а ведь люди должны знать своих героев )
P.S. Первый раз пишу в комментах, так что пользуясь случаем - спасибо за библиотеку )
Отв: Как создать зеркало
Беда в том, что такой таблицы не существует.
А отдавать всю node_revisions я пока морально не готов.
Надо придумать какой хитрый экспорт, или вообще всё переделать.
Отв: Как создать зеркало
Нет проблем, можешь дать мне кусочек файла с примерной структурой, чтобы я мог написать конвертер для этих данных? Вот и будет хитрый экспорт )
адрес: al420(гав-кусь-ням)tut.by
Отв: Как создать зеркало
Какого файла, ты о чём? Всё в базе.
http://github.com/larin/librusec/blob/master/librusec.sql
Отв: Как создать зеркало
В случае удаления файла на lib.rus.ec будет ли удалён автоматически файл на зеркале?
Отв: Как создать зеркало
Да.
Если быть точным, файлы не удаляются никогда, они помечаются как удалённые в базе, но в любой момент могут быть востановлены любым пользователем.
Отв: Как создать зеркало
Извините, я слегка не в теме, но не подойти ли к вопросу глобально: cloud + хранилище типа s3? Вопросы типа DDoS это решает. Остается легальный вопрос. К интерфейсу на cloud (appengine? м\б что-то еще?) претензий формально нет, т.к. данные на нем не хранятся, а вот хранилище надо подобрать с умом.
Как считаете?
Отв: Как создать зеркало
Беда в ценах. Я смотрел cloud storage, но цены у них запредельные.
Отв: Как создать зеркало
Насколько это дороже теперешних расходов на "обычный" хостинг? Я бы согласился на рекламу в обмен на стабильную работу библиотеки.
И мне кажется, что вопросе с деньгами можно было бы решить, но сначала неплохо бы узнать решение легальных вопросов - s3, по-моему, абузонеустойчив.
Улучшения и дополнения.
Добрый день,
Есть несколько пожеланий по поводу "зеркал":
1. Можно ли выложить таблицу libpolka, ведь как раз в ней лежат комментарии к книгам? Хотя самый лучший вариант - разделить каменты юзеров и полку (sql view?)
2. В идеале, было бы сделать синхру по rsync (если такое возможно), а то каждый раз качать все таблицы целиком - это неэффектинво.
Если возникнут какие-то вопросы - можно обсудить их в личке (мы этот код можем сделать и протестировать сами, главное его потом выложить :) ).
--
"Директор катка" (lib.ololo.cc)
Отв: Улучшения и дополнения.
У нас с Вами очень похожие запросы :) Написал в личку.
Как по быстрому стащить часть ваших книг ?
Нужен только машиночитаемый текст (без djvu,pdf). Реально нужно пару гиг текста для машинного анализа. Худ. лит. какая не будь подошла бы.
Отв: Как по быстрому стащить часть ваших книг ?
http://lib.rus.ec/allbooks
Отв: Как по быстрому стащить часть ваших книг ?
http://torrent.rus.ec/viewforum.php?f=52
не - господа....
... я с вами больше не дружу... мне по крайней мере отвечают когда я спрашиваю... это касается вашего "шефа"... я не "ддосю" я просто не разговариваю... я не покину ваш ресурс - буду качать книжки когда это возможно... и еще я не "опер" ... , но этот акк можно удалить чтобы не засорял базу... адью... (о себе - 40 лет , CSO по профессии)
Отв: Как создать зеркало
а если дома сделать по такому рецепту , чтоб не прикопались https://www.torproject.org/docs/tor-hidden-service.html.ru , подойдет такой вариант?
Экспорт отзывов о книгах
Есть ли планы отдавать на публику дампы таблиц libpolka / libpolkarate ---- насколько я понял по структуре базы, именно в них находятся отзывы и рейтинги пользователей о книгах?
Отв: Как создать зеркало
А когда это поменялось bookid -> bid и т.п.? Я инфу пропустил или ее не было?
Благо, что я скрипт обновления баз написал под параноидное настроение...