Источники без чёрного ящика.
Возможности и ограничения получения данных LiveJournal
RSS и Atom отдельных журналов
Поддерживаются публичные /data/rss и /data/atom. Эти форматы описаны в официальной справке LiveJournal. Наличие документации не означает, что каждый журнал или счётчик доступен сейчас. Счётчик комментариев читается только если он действительно присутствует в ответе.
Общая лента и XML-RPC
Для исторического latest-rss.bml и XML-RPC есть адаптеры. Работоспособность конкретного источника необходимо подтвердить диагностикой на сервере. Исторический Atom stream и недокументированный JSON-RPC не используются в фоновом сборе. Полный поток всех записей не гарантирован.
Разрешения и ограничения
Внешний сбор по умолчанию выключен. Нужны глобальное включение, контакт оператора бота и явная запись о разрешении для каждого источника. Все воркеры используют одну последовательную HTTP-очередь с паузой; перенаправления не обходятся. Не применяются CAPTCHA-решатели, авторизация чужими данными или обход блокировок.
Что сохраняется
URL, идентификатор, заголовок, автор, даты, категории и история доступных счётчиков. Анонсы внешних записей по умолчанию не сохраняются. Уникальные комментаторы без документированного источника остаются неизвестными. Наблюдения доступны на странице статуса.