Ответ
Порнолаб-граббер: парсинг ссылок и создание постов Опции темы
Старый 18.02.2022, 14:19
  #11
Trader1985
 
Аватар для Trader1985
Регистрация: 01.08.2011
Сообщений: 473

Важное обновление. Добавил граббинг из категории "Фото и журналы". Если честно, никогда не постил картинки, поэтому до конца не понимаю что нужно постерам...

Во вкладке "Граббер", в разделе "Оригинальный постер", добавил пару новых настроек:
1) Максимальная ширина и высота (постера);
2) Максимальное количество постеров;
3) Пункт "Разное": искать постеры под спойлерами; искать постеры в скачанном торренте; искать постеры ТОЛЬКО в скачанном торренте;

Алгоритм граббинга фоток и журналов следующий:
Загружается страница торрент-раздачи на ПорноЛабе.
- Если в настройках "искать постеры под спойлерами" то, соответственно, парсятся ссылки на все возможные картинки.
- Если в настройках "искать постеры в скачанном торренте" и максимальное количество постеров (пункт 2) не превышено, то после скачивание торрента будет произведён поиск недостающего числа картинок из него.
- Если в настройках "искать постеры ТОЛЬКО в скачанном торренте" то картинки на странице торрент-раздачи вообще игнорируются, и после скачивания торрента все картинки будут парситься из него.

Но тут есть нюанс: если в настройках стоит "искать постеры в скачанном торренте" и постеров на странице торрент-раздачи вообще не найдено, либо в настройках стоит "искать постеры ТОЛЬКО в скачанном торренте" - в таком случаи, в первую очередь в скаченном торренте будут искаться картинки с ключевым словом "cover".
Так же, если в скаченном торренте несколько папок, например три, а "Максимальное количество постеров" 15 картинок, то 15 делить на три равно 5 - т.е. из каждой скаченной папки будет взято по пять картинок, чтобы постеры загруженные на фотохостинги отражали всё содержимое загруженного на ФО архива. Так же, из каждой папки картинки всегда берутся рандомно, чтобы не было кучи постов-клонов на форумах.

Если в настройке "Максимальная ширина и высота" (постера) стоит, к примеру, значение "1920x10000", то в таком случаи каждая картика превышающая эти числа сперва будет обрезана по ширине, а далее, если нужно, и по высоте. Оригинальные пропорции сохраняются. Если в настройках стоит "искать постеры ТОЛЬКО в скачанном торренте" либо "искать постеры в скачанном торренте" - то это не значит, что будут обрезаны и сжаты оригинальные картинки, для загрузки постеров на фотохостинги сперва создаются копии картинок, именно они и будут обрезаться, оригинальные изображения из скаченного торрента никак не будут изменены.

Так же для категории "Фото и журналы" архивация всегда по умолчанию включена.

Новые макросы-переменные для раздела "Фото и журналы":
{imgResolution} - разрешение картинок
{imgNumberPhotos} - количество картинок
{imgNumberSets} - количество сетов
{imgNumberMagazines} - количество журналов
{imgNumberPages} - количество страниц
{imgFormat} - формат картинок


Ну всё, вроде... Если лень читать, запомните главное: для категории "Фото и журналы" в настройках лучше ставьте "искать постеры в скачанном торренте" либо "искать постеры ТОЛЬКО в скачанном торренте", чтобы уж наверняка были обложки.
Нравится 1   Не нравится 0
Пожаловаться на это сообщение 0  
Ответить с цитированием
Нравится:
Старый 07.05.2022, 22:40
  #12
Trader1985
 
Аватар для Trader1985
Регистрация: 01.08.2011
Сообщений: 473

Добавил:
  1. daofile.com;
  2. FTP-загрузку;
  3. Таймаут ожидания в минутах;
  4. Настройку максимального количества скриншотов;

Пункт 2: Автоматическое получение ссылок на загруженные файлы невозможно, зато теперь можете загружать на любые сервера куда хотите.

Пункт 3: Граббер ==> Торрент ==> Таймаут ожидания в минутах.
Настройка влияет на ошибку "нулевая скорость загрузки". Загрузка остановится если скорость скачивания равна нулю на протяжении n минут. Ноль -- неограниченное время ожидания.

Пункт 4: Граббер ==> Скринлисты == > Максимальное количество.
В одной торрент-раздаче может быть очень много видеофайлов. Если проверка не нужна, оставьте это поле пустым.
Нравится 0   Не нравится 0
Пожаловаться на это сообщение 0  
Ответить с цитированием
Старый 20.06.2022, 18:57
  #13
Trader1985
 
Аватар для Trader1985
Регистрация: 01.08.2011
Сообщений: 473

Добавил:
  1. Индивидуальные прокси для порнолаб-аккаунтов. Разделитель " || ";
  2. Оригинальные названия видеофайлов;
  3. Резервные фотохостинги на случай сбоя основных;
  4. Файлообменник ddownload.com;

1) Теперь можно добавлять в txt-файл порнолаб-аккаунты в таком формате:
логин:пароль || username:[email protected]:port
Это позволит вам добавить отдельный уникальный прокси для каждого порнолаб-аккаунта.

2) По умолчанию видеофайлам после скачивания даётся новое имя которое генерируется в поле "Тайтл поста". Но если вам обязательно необходимо оставить старые имена, тогда вкладка "Шаблон поста" == > Разное == > сохранять оригинальные названия видеофайлов -- поставьте галочку.

3) Раньше, если во время граббинга случался сбой во время загрузки на фотохостинг, это приводило к завершению всего потока с ошибкой. А теперь вы можете выбрать дополнительные(ный) фотохостинги на случай сбоя основных: Фотохостинги == > Запасные. Это должно повысить стабильность работы граббера.
Нравится 0   Не нравится 0
Пожаловаться на это сообщение 0  
Ответить с цитированием

Ответ
 
 

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Получение кода страниц (парсинг) и работа с ним. romeono Файлообмен 2 19.08.2016 00:50
Создание сайта для продажи ссылок dangerous Статьи 5 03.01.2014 18:18
Парсинг статистики liveinternet с помощью LiParser Domkrat Сервисы 7 13.08.2013 17:14
Парсинг ссылок из Вашего ФО (от слов к делу) k0x Файлообмен 10 18.05.2012 17:52
Парсинг ссылок из Вашего ФО k0x Файлообмен 7 07.05.2012 12:45

Метки
граббер, парсер, порнолаб


Здесь присутствуют: 1 (пользователей: 0, гостей: 1)
 
Опции темы

Быстрый переход


Текущее время: 04:30. Часовой пояс GMT +3.