Либрусек и всё всё всё...
| |
drserj | Дата: Пятница, 04.12.2009, 15:07 | Сообщение # 1 |
Генералиссимус
Группа: Администраторы
Сообщений: 4693
Статус: Offline
| Итак, дорогие пользователи программы LibRus - Библиотекарь, как говорил великий классик марксизма - революция совершилась. Не будем спорить по поводу того, хорошо или плохо то, что происходит на либрусеке... Обсудим-ка проблему - что делать дальше? 1. Имеет ли смысл работа программы с сервером либруса? 2. Будем переходить на Флибусту, или останемся на либрусовой базе до выхода мультибиблиотечной версии? 3. Что делать с локальными коллекциями ? Как синхронизироваться с либрусом? Выдвигайте свои предложения, вопросы, пожелания. Будем коллегиально решать возникшие проблемы.
drSerj
|
|
| |
Shams | Дата: Суббота, 05.12.2009, 11:57 | Сообщение # 2 |
Генерал-майор
Группа: Проверенные
Сообщений: 274
Статус: Offline
| Quote (drserj) 2. Будем переходить на Флибусту, или останемся на либрусовой базе до выхода мультибиблиотечной версии? Я лично за второй вариант. Но даже, если ты сам склоняешся к первому, то все равно стоит какое-то время выждать. Пусть проект хоть минимально докажет свою жизнеспособность как в плане наполнения, так и технической и юридической устойчивости. А то вдруг сервер будет ложиться от DDOSа с одного домашнего компьютера И Магистер, наверняка, в ближайшее время начнет катать на них телеги. Quote (drserj) 3. Что делать с локальными коллекциями ? Как синхронизироваться с либрусом? Вот это не понял. Вроде и ежедневные обновления регулярно выкладываются и база нормально обновляется. Или Ларин где-то обещался это прекратить?
|
|
| |
drserj | Дата: Суббота, 05.12.2009, 13:27 | Сообщение # 3 |
Генералиссимус
Группа: Администраторы
Сообщений: 4693
Статус: Offline
| Quote (Shams) Я лично за второй вариант. Беда в том, что если перекрыты для скачки книги ( а будут перекрыты именно новинки и всё боле-мене интересное) то смысл в программе резко снижается. Плюс к тому, анализируя базу либруса, я вижу, что она подвергается жесткой коррекции, выкашиваются десятками, сотнями записи о книгах. Каких, почему - я пока не анализировал. Но то, что выкашиваются сразу кусками - это да. Заслуживает ли подобное доверия ? Раньше я знал, что есть в архивах - то есть в базе. Даже если книга удалена - это не боле чем пометка в базе. А теперь? В архивах (старых) присутствует масса неопознанных книг, которых нет в базе. Нафиг такое счастье ? Quote (Shams) Вот это не понял. Вроде и ежедневные обновления регулярно выкладываются и база нормально обновляется. Или Ларин где-то обещался это прекратить? Это обещается прекратиться, исходя из самой концепции Ларина. Плюс к тому, Зеркала остаются зеркалами до определенного момента. На флибусте, похоже, этот момент наступил. Исходя из этого надо выбирать - оставаться на старой платформе или переходить на более перспективную (надеюсь) новую. Ларин дал исчерпывающий ответ по своей позиции - деньги. Нищебродам - не место на либрусе. Соответственно - я смотрел бы в сторону других источников. Очень надеюсь, что флибуста оставит возможность синхронизации с либрусом (пока есть возможность) но продолжит наполнение собственного контента. Технически это возможно. Если не будет меняться структура базы - то и программу менять не надо. Я задал вопрос на флибусте, подождем ответа. В любом случае, будет версия в старой ветке (накопились некоторые изменения и надо выполнять обещания, которые дал народу). Поскольку не хочется выпускать обновление, которое в свете новых событий станет неактуальным - я предлагаю небольшой тайм-аут до выяснения обстоятельств. Если разборки затянутся - выпущу в старом формате но с исправлениями и дополнениями.
drSerj
|
|
| |
Shams | Дата: Суббота, 05.12.2009, 14:41 | Сообщение # 4 |
Генерал-майор
Группа: Проверенные
Сообщений: 274
Статус: Offline
| Quote (drserj) Очень надеюсь, что флибуста оставит возможность синхронизации с либрусом (пока есть возможность) но продолжит наполнение собственного контента. Это был бы идеальный вариант, но увы... Последняя синхронизация была за 25 ноября, а потом дороги разошлись. И это было декларативно объявлено.
|
|
| |
drserj | Дата: Суббота, 05.12.2009, 15:33 | Сообщение # 5 |
Генералиссимус
Группа: Администраторы
Сообщений: 4693
Статус: Offline
| Quote (Shams) Последняя синхронизация была за 25 ноября, а потом дороги разошлись еще вроде не разошлись, думают... хотя, может уже и решились...
drSerj
|
|
| |
Shams | Дата: Четверг, 10.12.2009, 05:20 | Сообщение # 6 |
Генерал-майор
Группа: Проверенные
Сообщений: 274
Статус: Offline
| Quote (drserj) Раньше я знал, что есть в архивах - то есть в базе. Даже если книга удалена - это не боле чем пометка в базе. А теперь? В архивах (старых) присутствует масса неопознанных книг, которых нет в базе. Нафиг такое счастье ? Что-то у меня получается прямо противоположная картина. В общем, за конкретные отдельные книги ничего не скажу. По состоянию на 09.12.2009: Книг в базе - 157109 Файлов в архивах - 133786 Получается, что 23323 записи в базе ведут в никуда. Тоже, конечно, ничего хорошего, но с нарисованной тобой картиной не согласуется. Есть у меня подозрение, что в мае, когда Ларин заменил архивы на сервере, были удалены первоначальные файлы книг, созданные пресловутым LibRusEc kit, и в последствии замененные на нормальные. Если это так, то туда им и дорога.
|
|
| |
314 | Дата: Воскресенье, 13.12.2009, 09:29 | Сообщение # 7 |
Рядовой
Группа: Пользователи
Сообщений: 5
Статус: Offline
| 1-3. Пока еще неясно, хотя, конечно, флибуста библиотека симпатичная дай бог, чтобы ее не задавили. Если база книг в либрусе будет самой полной из имеющихся то хорошо бы использовать именно ее, реализовав возможность скачивать заблокированные крижки из других источников (из флибусты, например) в автоматическом или ручном режимах. Добавлено (13.12.2009, 09:29) --------------------------------------------- http://www.computerra.ru/vision/486132/ - Никто почти и не сомневается, что "Либрусек" обречен. Его зеркала уже стали отходить от слепого автоматического обновления, и вовсю начинают жить самостоятельной жизнью. На форуме программы LibRusLib, одной из главных функций которой является загрузка обновлений с "Либрусека", обсуждается вопрос о том, чтобы от этих обновлений отвязаться. Кроме всего прочего, явно несостоятельна и объявленная бизнес-модель: за триста рублей на "Литресе" можно купить десяток книг, уже готовых к использованию в 15 разных форматах (притом, что цены на "Литресе", в среднем,, ниже), и средний читатель столько в месяц просто не успевает проглотить. А использовать такой доступ, чтобы выкачать как можно больше впрок нецелесообразно: на то есть совершенно бесплатные торренты.
Сообщение отредактировал 314 - Четверг, 10.12.2009, 19:00 |
|
| |
drserj | Дата: Воскресенье, 13.12.2009, 22:50 | Сообщение # 8 |
Генералиссимус
Группа: Администраторы
Сообщений: 4693
Статус: Offline
| Quote (314) Что-то у меня получается прямо противоположная картина. В общем, за конкретные отдельные книги ничего не скажу. По состоянию на 09.12.2009: Книг в базе - 157109 Файлов в архивах - 133786 Получается, что 23323 записи в базе ведут в никуда. Тоже, конечно, ничего хорошего, но с нарисованной тобой картиной не согласуется. Хех... я не знаю откуда у тебя цифры, но, я писал специально софт для разбора и анализа, в итоге - в изначальных архивах (еще со времен рождения либруса) файлов значительно больше. Далее, огромное количество пропусков в поле bookid (около двух десятков тыщ). С учетом того, что букид - поле автоинкрементное, т.е. увеличивающее автоматом последующее значение на 1 - вывод напрашивается сам. Да и это не только мои выводы, можешь уточнить и у зеркальщиков... Quote (314) Если база книг в либрусе будет самой полной из имеющихся то хорошо бы использовать именно ее, реализовав возможность скачивать заблокированные крижки из других источников (из флибусты, например) в автоматическом или ручном режимах. С некоторого момента флибуста и либрус разошлись с синхронизацией. Что и где полнее уже сказать невозможно. Пока и туда и сюда переливают литературу, что будет дальше - не знаю. Параллельно вести две базы, на 99 процентов сходные - смысла нет. Вопрос сейчас решается, веду переговоры с флибустой. Будем решать вопросы по мере возникновения... Одно плохо - из-за этой сутолоки нет возможности работать с обновлением программы - слишком мало еще данных Впрочем, пока либрусовый вариант работает - и то хорошо. Завтра, надеюсь, получу дампы флибусты - там и посмотрим...
drSerj
|
|
| |
Shams | Дата: Понедельник, 14.12.2009, 05:54 | Сообщение # 9 |
Генерал-майор
Группа: Проверенные
Сообщений: 274
Статус: Offline
| Quote (drserj) я не знаю откуда у тебя цифры Количество книг в базе - из твоей программы, количество файлов в архивах - взял да пересчитал. Я ни в коей мере не подвергаю сомнению твои данные об удаленных файлах и обрезаниях в базе. Но считаю, что не стоит демонизировать Ларина, подозревая его в том, что именно в последнее время, после решения о коммерциализации библиотеки, он вдруг начал ее курочить во вред своему бизнесу, но за-то назло врагам. Скорее всего, это происходило в разное время в процессе удаления дублей, чистки мусора и борьбы с деструктивными вражескими скриптами, но тогда на это никто не обращал внимание. Сам помню случай, когда некий товарищ, испытывая написанную им программу, одномоментно залил порядка 4 тыщ порнорассказов со Стульчика. Он потом каялся, а Ларин по требованию возмущенной общественности все это из библиотеки удалил. И, наверняка, это не единственный подобный случай.
Сообщение отредактировал Shams - Понедельник, 14.12.2009, 06:03 |
|
| |
314 | Дата: Понедельник, 14.12.2009, 10:16 | Сообщение # 10 |
Рядовой
Группа: Пользователи
Сообщений: 5
Статус: Offline
| Quote (drserj) Параллельно вести две базы, на 99 процентов сходные - смысла нет. Не, я имел в виду другое. Предположим, что база либрусека наиболее полная, открытая, но при этом большинство книжек из нее скачать нельзя. В этом случае логично использовать именно эту базу, предусмотрев скачивание заблокированных книжек из других источников. Поиск ведется по bookid (на флибусте вроде бы сохраняют либрусовскую bookid), либо по md5. Но в любом случае лучше бы подождать немножко, пока все устаканится.
|
|
| |
drserj | Дата: Понедельник, 14.12.2009, 20:12 | Сообщение # 11 |
Генералиссимус
Группа: Администраторы
Сообщений: 4693
Статус: Offline
| Quote (314) Поиск ведется по bookid (на флибусте вроде бы сохраняют либрусовскую bookid), либо по md5. увы, но на флибусте пошло расхождение bookid, а по мд5 - нет поиска, так что пока - думаем...
drSerj
|
|
| |
314 | Дата: Вторник, 15.12.2009, 09:32 | Сообщение # 12 |
Рядовой
Группа: Пользователи
Сообщений: 5
Статус: Offline
| А поиск по названию, а затем сравнение мд5?
|
|
| |
drserj | Дата: Вторник, 15.12.2009, 11:54 | Сообщение # 13 |
Генералиссимус
Группа: Администраторы
Сообщений: 4693
Статус: Offline
| Quote (314) А поиск по названию, а затем сравнение мд5? А есть уверенность в том, что МД5 совпадут? Или названия не поменяют? Нет... Да и скорость такого поиска будет, мягко говоря, не очень...Я уже думал про такой вариант, пока не сильно нравится, но тоже имеет право быть.
drSerj
|
|
| |
Shams | Дата: Среда, 16.12.2009, 07:12 | Сообщение # 14 |
Генерал-майор
Группа: Проверенные
Сообщений: 274
Статус: Offline
| А вот подоспело и опровержение всему, что я до этого написал. После вчерашнего обновления базы, поиск в режиме "Последнее обновление" выдал список, в котором в разных местах отсутствовали 32 BookID. Причем, с сайта 30 книг, соответствующих этим ID, скачались свободно, а 2 - отсутствовали (видимо попали в "удаленные"). С сегодняшним обновлением - картина аналогичная. В базе отсутствуют 45 книг, имеющихся на сайте. Я бы еще понял, если бы из дампа базы вырезались все платные книги. А так, в чем смысл? Перекрыть кислород зеркалам и подобным этой программам? Проще просто не выкладывать дамп.
|
|
| |
drserj | Дата: Четверг, 17.12.2009, 12:25 | Сообщение # 15 |
Генералиссимус
Группа: Администраторы
Сообщений: 4693
Статус: Offline
| что-то творится с базой... я обнаружил, что некоторые книги есть в файле, есть в базе, но при связке либбук-либавтор-либавторнейм - они не видны... что-то с таблицей либавторнейм... Времени разобраться не было, появится возможность - проанализирую...
drSerj
|
|
| |
|