Либрусек и всё всё всё... - Форум
LibRusLib
Пятница, 02.12.2016, 18:59
Приветствую Вас Гость | RSS
 
Главная Либрусек и всё всё всё... - ФорумРегистрацияВход
[ Новые сообщения · Участники · Правила форума · Поиск · RSS ]
Страница 1 из 212»
Архив - только для чтения
Форум » Архив "LibRus - Библиотекарь" » Обсуждение работы программы в свете последних событий » Либрусек и всё всё всё... (Решаем проблемы)
Либрусек и всё всё всё...
drserjДата: Пятница, 04.12.2009, 13:07 | Сообщение # 1
Генералиссимус
Группа: Администраторы
Сообщений: 3864
Репутация: 24
Статус: Offline
Итак, дорогие пользователи программы LibRus - Библиотекарь, как говорил великий классик марксизма - революция совершилась.

Не будем спорить по поводу того, хорошо или плохо то, что происходит на либрусеке... Обсудим-ка проблему - что делать дальше?

1. Имеет ли смысл работа программы с сервером либруса?
2. Будем переходить на Флибусту, или останемся на либрусовой базе до выхода мультибиблиотечной версии?
3. Что делать с локальными коллекциями ? Как синхронизироваться с либрусом?

Выдвигайте свои предложения, вопросы, пожелания. Будем коллегиально решать возникшие проблемы.


drSerj
 
ShamsДата: Суббота, 05.12.2009, 09:57 | Сообщение # 2
Генерал-майор
Группа: Проверенные
Сообщений: 274
Репутация: 0
Статус: Offline
Quote (drserj)
2. Будем переходить на Флибусту, или останемся на либрусовой базе до выхода мультибиблиотечной версии?

Я лично за второй вариант. Но даже, если ты сам склоняешся к первому, то все равно стоит какое-то время выждать. Пусть проект хоть минимально докажет свою жизнеспособность как в плане наполнения, так и технической и юридической устойчивости. А то вдруг сервер будет ложиться от DDOSа с одного домашнего компьютера biggrin И Магистер, наверняка, в ближайшее время начнет катать на них телеги.

Quote (drserj)
3. Что делать с локальными коллекциями ? Как синхронизироваться с либрусом?

Вот это не понял. Вроде и ежедневные обновления регулярно выкладываются и база нормально обновляется. Или Ларин где-то обещался это прекратить?
 
drserjДата: Суббота, 05.12.2009, 11:27 | Сообщение # 3
Генералиссимус
Группа: Администраторы
Сообщений: 3864
Репутация: 24
Статус: Offline
Quote (Shams)
Я лично за второй вариант.

Беда в том, что если перекрыты для скачки книги ( а будут перекрыты именно новинки и всё боле-мене интересное) то смысл в программе резко снижается. Плюс к тому, анализируя базу либруса, я вижу, что она подвергается жесткой коррекции, выкашиваются десятками, сотнями записи о книгах. Каких, почему - я пока не анализировал. Но то, что выкашиваются сразу кусками - это да. Заслуживает ли подобное доверия ? Раньше я знал, что есть в архивах - то есть в базе. Даже если книга удалена - это не боле чем пометка в базе. А теперь? В архивах (старых) присутствует масса неопознанных книг, которых нет в базе. Нафиг такое счастье ?

Quote (Shams)
Вот это не понял. Вроде и ежедневные обновления регулярно выкладываются и база нормально обновляется. Или Ларин где-то обещался это прекратить?

Это обещается прекратиться, исходя из самой концепции Ларина. Плюс к тому, Зеркала остаются зеркалами до определенного момента. На флибусте, похоже, этот момент наступил. Исходя из этого надо выбирать - оставаться на старой платформе или переходить на более перспективную (надеюсь) новую. Ларин дал исчерпывающий ответ по своей позиции - деньги. Нищебродам - не место на либрусе. Соответственно - я смотрел бы в сторону других источников. Очень надеюсь, что флибуста оставит возможность синхронизации с либрусом (пока есть возможность) но продолжит наполнение собственного контента. Технически это возможно. Если не будет меняться структура базы - то и программу менять не надо. Я задал вопрос на флибусте, подождем ответа. В любом случае, будет версия в старой ветке (накопились некоторые изменения и надо выполнять обещания, которые дал народу). Поскольку не хочется выпускать обновление, которое в свете новых событий станет неактуальным - я предлагаю небольшой тайм-аут до выяснения обстоятельств. Если разборки затянутся - выпущу в старом формате но с исправлениями и дополнениями.


drSerj
 
ShamsДата: Суббота, 05.12.2009, 12:41 | Сообщение # 4
Генерал-майор
Группа: Проверенные
Сообщений: 274
Репутация: 0
Статус: Offline
Quote (drserj)
Очень надеюсь, что флибуста оставит возможность синхронизации с либрусом (пока есть возможность) но продолжит наполнение собственного контента.

Это был бы идеальный вариант, но увы... Последняя синхронизация была за 25 ноября, а потом дороги разошлись. И это было декларативно объявлено.
 
drserjДата: Суббота, 05.12.2009, 13:33 | Сообщение # 5
Генералиссимус
Группа: Администраторы
Сообщений: 3864
Репутация: 24
Статус: Offline
Quote (Shams)
Последняя синхронизация была за 25 ноября, а потом дороги разошлись

еще вроде не разошлись, думают... хотя, может уже и решились...


drSerj
 
ShamsДата: Четверг, 10.12.2009, 03:20 | Сообщение # 6
Генерал-майор
Группа: Проверенные
Сообщений: 274
Репутация: 0
Статус: Offline
Quote (drserj)
Раньше я знал, что есть в архивах - то есть в базе. Даже если книга удалена - это не боле чем пометка в базе. А теперь? В архивах (старых) присутствует масса неопознанных книг, которых нет в базе. Нафиг такое счастье ?

Что-то у меня получается прямо противоположная картина. В общем, за конкретные отдельные книги ничего не скажу.

По состоянию на 09.12.2009:
Книг в базе - 157109
Файлов в архивах - 133786

Получается, что 23323 записи в базе ведут в никуда. Тоже, конечно, ничего хорошего, но с нарисованной тобой картиной не согласуется.

Есть у меня подозрение, что в мае, когда Ларин заменил архивы на сервере, были удалены первоначальные файлы книг, созданные пресловутым LibRusEc kit, и в последствии замененные на нормальные. Если это так, то туда им и дорога.

 
314Дата: Воскресенье, 13.12.2009, 07:29 | Сообщение # 7
Рядовой
Группа: Пользователи
Сообщений: 5
Репутация: 0
Статус: Offline
1-3.

Пока еще неясно, хотя, конечно, флибуста библиотека симпатичная дай бог, чтобы ее не задавили.

Если база книг в либрусе будет самой полной из имеющихся то хорошо бы использовать именно ее, реализовав возможность скачивать заблокированные крижки из других источников (из флибусты, например) в автоматическом или ручном режимах.

Добавлено (13.12.2009, 09:29)
---------------------------------------------
http://www.computerra.ru/vision/486132/ -

Никто почти и не сомневается, что "Либрусек" обречен. Его зеркала уже стали отходить от слепого автоматического обновления, и вовсю начинают жить самостоятельной жизнью. На форуме программы LibRusLib, одной из главных функций которой является загрузка обновлений с "Либрусека", обсуждается вопрос о том, чтобы от этих обновлений отвязаться. Кроме всего прочего, явно несостоятельна и объявленная бизнес-модель: за триста рублей на "Литресе" можно купить десяток книг, уже готовых к использованию в 15 разных форматах (притом, что цены на "Литресе", в среднем,, ниже), и средний читатель столько в месяц просто не успевает проглотить. А использовать такой доступ, чтобы выкачать как можно больше впрок нецелесообразно: на то есть совершенно бесплатные торренты.

Сообщение отредактировал 314 - Четверг, 10.12.2009, 17:00
 
drserjДата: Воскресенье, 13.12.2009, 20:50 | Сообщение # 8
Генералиссимус
Группа: Администраторы
Сообщений: 3864
Репутация: 24
Статус: Offline
Quote (314)
Что-то у меня получается прямо противоположная картина. В общем, за конкретные отдельные книги ничего не скажу. По состоянию на 09.12.2009: Книг в базе - 157109 Файлов в архивах - 133786 Получается, что 23323 записи в базе ведут в никуда. Тоже, конечно, ничего хорошего, но с нарисованной тобой картиной не согласуется.

Хех... я не знаю откуда у тебя цифры, но, я писал специально софт для разбора и анализа, в итоге - в изначальных архивах (еще со времен рождения либруса) файлов значительно больше. Далее, огромное количество пропусков в поле bookid (около двух десятков тыщ). С учетом того, что букид - поле автоинкрементное, т.е. увеличивающее автоматом последующее значение на 1 - вывод напрашивается сам. Да и это не только мои выводы, можешь уточнить и у зеркальщиков...

Quote (314)
Если база книг в либрусе будет самой полной из имеющихся то хорошо бы использовать именно ее, реализовав возможность скачивать заблокированные крижки из других источников (из флибусты, например) в автоматическом или ручном режимах.

С некоторого момента флибуста и либрус разошлись с синхронизацией. Что и где полнее уже сказать невозможно. Пока и туда и сюда переливают литературу, что будет дальше - не знаю. Параллельно вести две базы, на 99 процентов сходные - смысла нет. Вопрос сейчас решается, веду переговоры с флибустой. Будем решать вопросы по мере возникновения... Одно плохо - из-за этой сутолоки нет возможности работать с обновлением программы - слишком мало еще данных sad Впрочем, пока либрусовый вариант работает - и то хорошо. Завтра, надеюсь, получу дампы флибусты - там и посмотрим...


drSerj
 
ShamsДата: Понедельник, 14.12.2009, 03:54 | Сообщение # 9
Генерал-майор
Группа: Проверенные
Сообщений: 274
Репутация: 0
Статус: Offline
Quote (drserj)
я не знаю откуда у тебя цифры

Количество книг в базе - из твоей программы, количество файлов в архивах - взял да пересчитал.

Я ни в коей мере не подвергаю сомнению твои данные об удаленных файлах и обрезаниях в базе. Но считаю, что не стоит демонизировать Ларина, подозревая его в том, что именно в последнее время, после решения о коммерциализации библиотеки, он вдруг начал ее курочить во вред своему бизнесу, но за-то назло врагам. Скорее всего, это происходило в разное время в процессе удаления дублей, чистки мусора и борьбы с деструктивными вражескими скриптами, но тогда на это никто не обращал внимание.
Сам помню случай, когда некий товарищ, испытывая написанную им программу, одномоментно залил порядка 4 тыщ порнорассказов со Стульчика. Он потом каялся, а Ларин по требованию возмущенной общественности все это из библиотеки удалил. И, наверняка, это не единственный подобный случай.

Сообщение отредактировал Shams - Понедельник, 14.12.2009, 04:03
 
314Дата: Понедельник, 14.12.2009, 08:16 | Сообщение # 10
Рядовой
Группа: Пользователи
Сообщений: 5
Репутация: 0
Статус: Offline
Quote (drserj)
Параллельно вести две базы, на 99 процентов сходные - смысла нет.

Не, я имел в виду другое. Предположим, что база либрусека наиболее полная, открытая, но при этом большинство книжек из нее скачать нельзя. В этом случае логично использовать именно эту базу, предусмотрев скачивание заблокированных книжек из других источников.

Поиск ведется по bookid (на флибусте вроде бы сохраняют либрусовскую bookid), либо по md5.

Но в любом случае лучше бы подождать немножко, пока все устаканится.

 
drserjДата: Понедельник, 14.12.2009, 18:12 | Сообщение # 11
Генералиссимус
Группа: Администраторы
Сообщений: 3864
Репутация: 24
Статус: Offline
Quote (314)
Поиск ведется по bookid (на флибусте вроде бы сохраняют либрусовскую bookid), либо по md5.

увы, но на флибусте пошло расхождение bookid, а по мд5 - нет поиска, так что пока - думаем...


drSerj
 
314Дата: Вторник, 15.12.2009, 07:32 | Сообщение # 12
Рядовой
Группа: Пользователи
Сообщений: 5
Репутация: 0
Статус: Offline
А поиск по названию, а затем сравнение мд5?
 
drserjДата: Вторник, 15.12.2009, 09:54 | Сообщение # 13
Генералиссимус
Группа: Администраторы
Сообщений: 3864
Репутация: 24
Статус: Offline
Quote (314)
А поиск по названию, а затем сравнение мд5?

А есть уверенность в том, что МД5 совпадут? Или названия не поменяют? Нет... Да и скорость такого поиска будет, мягко говоря, не очень...Я уже думал про такой вариант, пока не сильно нравится, но тоже имеет право быть.


drSerj
 
ShamsДата: Среда, 16.12.2009, 05:12 | Сообщение # 14
Генерал-майор
Группа: Проверенные
Сообщений: 274
Репутация: 0
Статус: Offline
А вот подоспело и опровержение всему, что я до этого написал. После вчерашнего обновления базы, поиск в режиме "Последнее обновление" выдал список, в котором в разных местах отсутствовали 32 BookID. Причем, с сайта 30 книг, соответствующих этим ID, скачались свободно, а 2 - отсутствовали (видимо попали в "удаленные").
С сегодняшним обновлением - картина аналогичная. В базе отсутствуют 45 книг, имеющихся на сайте.
Я бы еще понял, если бы из дампа базы вырезались все платные книги. А так, в чем смысл? Перекрыть кислород зеркалам и подобным этой программам? Проще просто не выкладывать дамп.
 
drserjДата: Четверг, 17.12.2009, 10:25 | Сообщение # 15
Генералиссимус
Группа: Администраторы
Сообщений: 3864
Репутация: 24
Статус: Offline
что-то творится с базой... я обнаружил, что некоторые книги есть в файле, есть в базе, но при связке либбук-либавтор-либавторнейм - они не видны... что-то с таблицей либавторнейм... Времени разобраться не было, появится возможность - проанализирую...

drSerj
 
Форум » Архив "LibRus - Библиотекарь" » Обсуждение работы программы в свете последних событий » Либрусек и всё всё всё... (Решаем проблемы)
Страница 1 из 212»
Поиск:

Copyright LibRusLib © 2016