Сообщений в теме: 16

[itservice]

Настрою парсинг с любых сайтов, при желании возможен перевод, поиск и замена любых частей теста.
Использую в ленте "дополнительный шаблон обработки"
Доноров предоставляете вы - я настраиваю. @servakov (https://t.me/servakov)

https://www.youtube....h?v=03pA4fAcz7U

Стоимость настройки импорта с одного сайта в плагине WPGrabber - 140 руб.
Стоимость одной ленты при настройке wpgrabber от 3-х лент - 120 руб.
Цена настройки импорта одной ленты при заказе от 10-и - 99 руб.

Сообщение отредактировал BlackRouZ: 05.02.2018 - 10:19

[itservice]

Парсинг в WPGrabber с авторизацией

Встречаются сайты, ограничивающие просмотр
для не зарегистрированых посетителей.

Типа такого: You have viewed your 1 free article

В WPGrabber для WordPress это выглядить как [font=, "blinkmacsystemfont"span style="background-color: #e5e5e5"текст не найден!/span/span/pp style="text-align: center"a class="bbc_url]

[background=#e5e5e5"текст не найден!/span/span/pp style="text-align: center"a class="bbc_url][background=#f1f1f1]временных файлов [/background][/background]

[/font]</span>

Обычно это "/wp-content/wpgrabber_tmp/"

Файл cookies.txt выглядить примерно так:

Проверяем:

Страница с контентом:

Естественно, что периодически сессию придётся обновлять.

Кроме этого надо добавить в файле TGrabberCore.php

в  функцию getContent

   curl_setopt($ch, CURLOPT_COOKIEFILE, $this->cookieFile);
curl_setopt($ch, CURLOPT_COOKIEJAR, $this->cookieFile);

а в function __construct()

добавить

$this->tmpDir = $this->rootPath . $this->config->get('testPath');
$this->cookieFile = $this->tmpDir . 'cookies.txt';

А можите обратиться ко мне:

@servakov (https://t.me/servakov)или на kwork,
и я вам всё настрою.

Сообщение отредактировал BlackRouZ: 13.02.2018 - 17:45

[itservice]

Импорт контента в блог со стен групп и сообществ соц. сети Вконтакте.ру
Добавлено:
Фотки с page_album_photos, background-image c видео

https://www.youtube....h?v=8sA9us0g84Y

[itservice]

wpGrabber для парсинга с Яндекс.Дзен


@itserviceink

На примере канала "Философский подход к созданию каналов Яндекс.Дзен"

[itservice]

Обновление плагина WPGrabber 2.1.319
Удалить первое изображение из статьи — Для тем в которых отображаются миниатюры и дублируются в статье

Задержка импорта — Используйте если у вас не успевают загружаться картинки на сервер или донор блокирует слишком частые соединения, возможно пригодится и при парсинге через бесплатные прокси (Обычно 2-10 сек. вполне достаточно)

[itservice]

Обновление плагина WPGrabber 2.1.320
https://wpgrabber-tu...bber-21320.html
- Задать имена файлов картинок из заголовка поста
- Задать своё названия атрибута class для картинки
- Сгенерировать alt: из атрибута title картинки или заголовка поста
- Удалять атрибуты лишние атрибуты: itemprop,srcset,data-original,data-src,data-srcset, ит.д.

[itservice]

Если статьи начали парситься или отображаться миниатюр на главной
странице wordpress при переезде на https, то проблему можно решить с помощью следующего фильтра
http://wpgrabber-tun...-wpgrabber.html

[itservice]

WPGrabber 2.1.4: спарсить теги - это реально.





Настрою парсингс любых сайтов, поиск и замена любых частей теста.
Доноров предоставляете вы - я настраиваю.

Сообщение отредактировал itservice: 28.05.2019 - 09:57

[itservice]

WPGrabber 2.1.5- добавил возможность создавать записи со временем статьи источника

[itservice]

WPGrabber 2.1.62 - Исправление для Вконтакте если не парсит картинки из групп VK

[itservice]

WPGrabber 2.1.68 - работа с WebP, Cмена регистра заголовка
Добавлено конвертирование WebP-изображения к jpeg-изображению;
В шаблон добавлен %TAGS_SCRAPE%;
Cмена регистра символов в заголовке MB_CASE_TITLE - Преобразует в верхний регистр первый символ каждого слова в строке,
MB_CASE_UPPER - Приведение строки к верхнему регистру
https://www.youtube....h?v=iFKvUlt3Kcs

[itservice]

Добавил опцию - ограничить захват картинок   ( будет сохранять только первую картинку )

[itservice]

Всё к этому и шло...

Цитата

Спасибо, что пользуетесь API Яндекс.Переводчика.
с 15 августа 2020 года мы закрываем доступ к бесплатному API Яндекс.Переводчика. Если вы хотите и дальше использовать технологии Яндекса для перевода, регистрируйтесь на сервисе Yandex Translate на платформе Яндекс.Облако.

Но, есть решение
WPGrabber v.2.1.70 - Перевод с помощью Translate Яндекс.Облако

WPGrabber v.2.1.711 - Перевод с помощью Google Translate API v2

[itservice]

WPGrabber 2.1.715 -  после каждой X картинки добавляем <!--nextpage-->

[itservice]

WPGrabber v.2.1.73
Добавил ещё одну систему перевода - Бесплатный Google Translate. Не требует получения ключа API.

[itservice]

WPGrabber v.2.1.74
Добавлена ещё одна систему перевода - Бесплатный Яндекс.Переводчик. Не требует получения ключа API.

[HappyBrain]

Цитата

как интересно