Послано - 27 Авг 2013 : 18:51:00
обновление реалтайм вам никто не сделает, т.к. лимит коннектов к серверу у самиздата равен 5000 соединений в сутки (плюс более жёсткие лимиты на коротких интервалах). до тех пор, пока на СИ не снимут лимиты или не сделают АПИ, придётся довольствоваться медленными опросами по списку.
я пробовал распараллеливание запросов через прокси, но с бесплатными это ненадёжно, а с платными - дорого. добавление новых авторов через прокси вообще нельзя в паблик пускать.
максимум, что я пока могу сделать - это по указанной ссылке на френдлист, добавлять в список наблюдения авторов из него. а далее оповещение о новых произведениях каждые 7 часов и каждые 10 минут проверка на изменение размера уже имеющихся в базе. как будет перерыв в командировках, планирую снизить время опроса до 3 часов.
Послано - 01 Ноябр 2013 : 02:31:33
Народ, а подскажите вот такое: как на самлибе что-то найти? Поиск на одно слово работает, находит. Но если надо найти, допустим, автора не только по фамилии, но и по имени, т.е. Имя Фамилия - тут выдает результат "0". Припоминаю, что в форму поиска между словами надо ставить не символ пробела, а какой-то другой... Вот вопрос - какой?
Послано - 17 Ноябр 2013 : 01:17:42
К ранее упоминавшимся сервисам, следящим за Самиздатом, добавляю наш: Базатаран. Новинки Самиздата.
Сервис простой, информация обновляется оперативно. Предназначен, в первую очередь, для поиска новинок. Можно задать фильтры по жанрам, полу автора, размеру произведения и/или обновления и т.д. Продолжения/обновления произведений также отслеживаются, причем можно отбросить "фиктивные" обновления (нулевого размера), которыми некоторые авторы пытаются искусственно удержать себя наверху ленты новинок.
Сервис будет развиваться. Пока предлагаю рассматривать его как дополнение и, в некоторых моментах, как альтернативу имеющимся.
Послано - 18 Ноябр 2013 : 08:27:43
День добрый всем читателям форума. Прошу помочь с такой проблемой - у меня почему то не получается полностью загрузить страницу с текстом на Самиздате. Если размер текста небольшой, порядка ста - ста двадцати кб то все в порядке, а вот больше уже не полностью загружается. Пользовался тремя браузерами - Опера, Мозилла и Хром. Ни у кого не было такой проблемы? Буду благодарен за помощь в решении данной проблемы.
Послано - 18 Ноябр 2013 : 09:59:25
Prizrak(kz) Скорее всего, так проявляется перегруженность сервера Самиздата. Когда он еще не совсем отказался работать, но уже почти. Особенно, если у вас медленный интернет - не успеваете попасть в момент, когда Самиздат готов работать, и он просто сбрасывает соединение посередине закачки. Судя по моим логам, вчера те или иные проблемы с доступом случались в течении всего дня. Сегодня утром - не лучше.
--------------------
Поправка. Основные проблемы вчера были через budclub.ru, он и сейчас лежит. А samlib.ru только что без проблем работал, попробуйте.
Prizrak(kz) Скорее всего, так проявляется перегруженность сервера Самиздата. Когда он еще не совсем отказался работать, но уже почти. Особенно, если у вас медленный интернет - не успеваете попасть в момент, когда Самиздат готов работать, и он просто сбрасывает соединение посередине закачки. Судя по моим логам, вчера те или иные проблемы с доступом случались в течении всего дня. Сегодня утром - не лучше.
--------------------
Поправка. Основные проблемы вчера были через budclub.ru, он и сейчас лежит. А samlib.ru только что без проблем работал, попробуйте.
Послано - 22 Ноябр 2013 : 15:29:10
Судя по моим логам обновлений, проблемы с недоступностью Самиздата (samlib и budclub) были сегодня примерно с 09:10 до 09:49. Потом краткосрочно около 11:35. Потом начались в 14:25 и продолжаются до сих пор (15:29). Нелетная погода, видимо.
Послано - 23 Ноябр 2013 : 02:39:14
Сегодня ночью на Самиздате что-то уж совсем запредельное: лента новинок не обновляется с 21:17-ти вчерашнего вечера (т.е. пять часов с лишним). Это когда удается прорваться, чтобы ее посмотреть.
Народ, а подскажите вот такое: как на самлибе что-то найти? Поиск на одно слово работает, находит. Но если надо найти, допустим, автора не только по фамилии, но и по имени, т.е. Имя Фамилия - тут выдает результат "0". Припоминаю, что в форму поиска между словами надо ставить не символ пробела, а какой-то другой... Вот вопрос - какой?
Павел
Точку. Примеры: "башун.виталий" или "господин.целитель" и сразу ищет.
Послано - 20 Дек 2013 : 23:20:17
Расширение функционала SIwatcher.ru
- в качестве источника оперативных обновлений теперь используется лента новинок самиздата за 30 дней. Опрашивается каждые 10 минут. Но так как в ней появляются не все обновления, то общий опрос страничек авторов оставлен и занимает около 14 часов. - добавлены странички авторов со списком произведений. Теперь там возможно как подписаться в один клик на отдельный текст автора, так и отписаться от некоторых текстов, в случае полной подписки на автора. - реализованы rss-ленты отслеживаемых авторов. Если автор существует в базе и отслеживается, то вам не нужно теперь регистрироваться - просто следите за его лентой в любом агрегаторе. - ещё различные мелочи в интерфейсе, вроде сортировок по различным критериям.
P.S. Начата работа над доступом к базе обновлений посредством API. На данный момент работает в бета-режиме (без нагрузочных тестов). Если кто желает использовать в своих проектах - обращайтесь.
Послано - 10 Фвр 2014 : 12:42:41
"ФИЛИН: Почтальон Самиздата" обзавелся новой возможностью - отображение скорости написания. Как для отдельных книг, так и для авторов.
"ФИЛИН: Почтальон Самиздата" обзавелся новой возможностью - отображение скорости написания. Как для отдельных книг, так и для авторов.
На основе этой информации также добавлена информация "Частота выкладки продолжений" (как по автору в целом, так и по каждой книге в отдельности) и "Прогноз" - попытка определить, когда будет следующее продолжение (при условии, что автор пишет более-менее ровно)
Неудобный выбор тегов с перемоткой, перемешаны русские и английские названия, нельзя искать тексты со всеми тегами. Жанры и теги скинуты в одну категорию, что, вообще, странно. Лучше бы, вообще, не вводили, чем так криво. Да и сами теги как-то рандомно книгам даны. Опять же, книги в большинстве случаев отбираются от обратного. Т.е. более актуально было бы сделать параллельную подборку с НЕ. Допустим, чтобы выключать из подборки определённые жанры. *-------------* Уставший тролль. Tckb ds ''nj ghjxbnfkb? nj dfv yt**h ltkfnm…
Послано - 06 Марта 2014 : 13:31:43
похоже, все сайты-следилки приходят к одному функционалу :) и у меня, относительно скоро, планируется появление тегов и подборок.
Неудобный выбор тегов с перемоткой, перемешаны русские и английские названия
По алфавиту. К тому же сделана быстрая фильтрация тэгов по части слова.
pipkin пишет:
нельзя искать тексты со всеми тегами.
Можно. Для множественного выбора тэгов нужно выбирать тэги с нажатой Ctrl.
pipkin пишет:
Лучше бы, вообще, не вводили, чем так криво.
Глупое утверждение. Своим наличием эта функция никому не мешает. Более того, согласно статистике, ею начали усиленно пользоваться. Более того, пользователи начали сами выставлять характеристики произведениям.
pipkin пишет:
Да и сами теги как-то рандомно книгам даны.
Вот если б вы указали произведение, которое неправильно классифицированно (хотя бы и на форуме Филина), ваше утверждение имело б основание, а так, уж простите - пустые слова.
pipkin пишет:
Опять же, книги в большинстве случаев отбираются от обратного.
Думаю, что все-таки с уклоном на ВХОЖДЕНИЕ в какое-либо множество, а не с уклоном на ИСКЛЮЧЕНИЯ из этого множества. Вам ли не знать, что попытка получить выборку "от обратного" в общем случае дает бОльшее количество результатов. Но...
pipkin пишет:
сделать параллельную подборку с НЕ. Допустим, чтобы выключать из подборки определённые жанры.
Хорошая идея, спасибо. Что-нибудь для этого придумаю.
Послано - 07 Марта 2014 : 00:51:26
parakimax пишет:
pipkin пишет:
Неудобный выбор тегов с перемоткой, перемешаны русские и английские названия
По алфавиту. К тому же сделана быстрая фильтрация тэгов по части слова.
Ага, по 5 раз перематывать все, чтобы найти тег с английским/русским или каким-нибудь японским написанным латиницей названием. Одни теги переведены, другие - нет... какой-то грамотной выборки нету... даже тупо по категориям и выбору языка названия серьёзно упростило бы выборку.
parakimax пишет:
pipkin пишет:
нельзя искать тексты со всеми тегами.
Можно. Для множественного выбора тэгов нужно выбирать тэги с нажатой Ctrl.
Невероятно удобно... особенно пользователям мобильных устройств и мак-юзерам. А из-за тупо сваленых в кучу названий русский-английских тегов само составление запроса происходит дольше, чем тут гугленье.
parakimax пишет:
pipkin пишет:
Да и сами теги как-то рандомно книгам даны.
Вот если б вы указали произведение, которое неправильно классифицированно (хотя бы и на форуме Филина), ваше утверждение имело б основание, а так, уж простите - пустые слова.
Тупо тыкнул сейчас на филин - последнее в списке обновлений это некий Наруто с тегом "мистика". Жанры, вообще в отдельную категорию надо увести, нечего им делать среди тегов. Ну и теги из одной книги, как-то тоже не прибавляют удобства в поиске.
parakimax пишет:
pipkin пишет:
Опять же, книги в большинстве случаев отбираются от обратного.
Думаю, что все-таки с уклоном на ВХОЖДЕНИЕ в какое-либо множество, а не с уклоном на ИСКЛЮЧЕНИЯ из этого множества. Вам ли не знать, что попытка получить выборку "от обратного" в общем случае дает бОльшее количество результатов. Но...
Ну вы просто мало читаете, по вхождению уже все книги были попробованы, а альтернативы какой-то при поиске по вхождению не находит.
Происходит какое-то непонятное изобретение велосипеда. Например тот же поиск http://ficbook.net/find позволяет найти нужное гораздо быстрее.
Послано - 31 Июля 2014 : 04:23:33
Что случилось с http://budclub.ru? Уже четвёртый день войти не могу. :( И даже если главная страница автора открывается, ни текст, ни комменты просмотреть невозможно. :(
Послано - 01 Авг 2014 : 02:28:44
Самиздат HD не пашет ибо budclub и samlib с америки лежат третий день ( Выручала российская прокся и samlib можно было читать пока он не упал 5 часов назад. А теперь вопрос : спасет ли отца русской демократии http://siwatcher.ru - если туда забить всех авторов оно показывает только обновления а сами тексты нужно идти читать на самиздат? Посоветуйте пожалуйста человеку сидящему на маках и айхренях как утолить читательский голод... пс. винда в ближайшие пару месяцев недоступна (
спасет ли отца русской демократии http://siwatcher.ru - если туда забить всех авторов оно показывает только обновления а сами тексты нужно идти читать на самиздат? Посоветуйте пожалуйста человеку сидящему на маках и айхренях как утолить читательский голод... пс. винда в ближайшие пару месяцев недоступна (
нет, копирование текстов у меня не сделано. и смысла нет, т.к., во-первых, есть куча веб-прокси, которые спокойно откроют вам странички самиздата, а во-вторых - авторы начнут возмущаться. пара человек мне УЖЕ успела написать жалобы, что их тексты лежат на сайте, после того как я сделал вывод просто списка их текстов.
Послано - 01 Авг 2014 : 09:38:47
Добавил на SIwatcher ссылки через веб-прокси. Если у вас не работает ни самлиб, ни бадклуб, то попробуйте ссылку по букве Р, над основной ссылкой.
Послано - 01 Авг 2014 : 10:03:49
RUSer, чем это отличается от budclub? Если самиздат лежит, то всё равно не почитать. Лучше бы добавили ссылку на кэш гугля.
Послано - 01 Авг 2014 : 10:08:16
тем, что для этого прокси не блокируется самлиб, поэтому для тех, у кого заблокированы все сервера самиздата, эта ссылка позволит получить доступ к актуальным текстам.
а кеш гугла потому и кешем зовётся, что идёт с задержкой от трёх до 14 дней.
но кстати, спасибо, идея хорошая - добавлю ссылку на кеш для удалённых текстов.
Послано - 01 Авг 2014 : 10:18:41
ну хорошо. прокси нужно блокированным и для новинок. но на случай именно падения СИ имхо неплохо бы и ссылку на кэш, т.к. много народу вообще о нём не знают. но авторы опять начнут возмущаться, правда )
Послано - 01 Авг 2014 : 11:04:21
лимит запросов самиздата в сутки равен 5000. я опрашиваю только самлиб - всего 4800 запросов в сутки, а остальное на пользовательские обращения при добавлении ссылок. дёргать парсером ещё и бадклуб? смысла не вижу.
поэтому нужно делать опрос со стороннего сервера отдельным скриптом. в итоге, приоритет этой фичи у меня низкий.
Ближайшие же планы: 1. Пользовательские подборки книг на самиздат (с автообновлением инфы) и на сторонние ресурсы (без обновления) с подпиской на их изменение. Сделано 90%. 2. Парсер фикбука 3. Выбор в настройках профиля сервера СИ. 4. Теги на авторов, тексты и подборки.
Послано - 01 Авг 2014 : 20:53:54
Вам просто надо договориться, 1 опрашивает первую половину алфавита, 2й другую. Потом обмениваетесь данными. Будет в 2 раза быстрее.
Послано - 01 Авг 2014 : 21:08:19
переписыванием парсера самлиба я займусь после отладки парсера фикбука, на котором собственно и отлажу модульную и асинхронную архитектуру новых парсеров. тогда уже можно будет просто и быстро добавлять парсеры разных сайтов, не трогая плагины фронтэнда. а там тогда заодно разделю проверку самлиба на несколько серверов.
и так давно уже пора избавиться от sinotify в основе - слишком много приходится извращаться при добавлении нового функционала, да и постоянно отваливающийся бот раздражает (не говоря, что без подключения к джаббер-серверу, он тупо висит). например, раздел рекомендаций "Что почитать?" был отложен из-за большой сложности в реализации.
Что случилось с http://budclub.ru? Уже четвёртый день войти не могу. :( И даже если главная страница автора открывается, ни текст, ни комменты просмотреть невозможно. :(
Мошков написал в Технических Вопросах Самиздата, что постараются починить в течении нескольких дней. Судя по нашим логам, budclub фактически не работает с 9-ти часов вечера 28-го июля. Пользуйтесь пока samlib-ом.