Сбор веб-страниц и данных,Позволяет быстро создавать веб-сайты。Кроме использования захватчика для сбора,Можно также заказать кастомный парсер на Python,Однако нужно уметь программировать。
Сборщик имеет отдельное программное обеспечение、Плагин и различные способы сбора данных в облаке и т. д.。Для независимого ПО требуется отдельный компьютер, работающий в фоновом режиме,и интерфейс публикации для соответствующей CMS。Версия плагина и сайт находятся на одном сервере,Сбор данных замедлит работу сайта。Размещение в облаке на собственном сайте обычно стоит недёшево。Кошелёк не набит,Здесь упоминаются только те, которыми можно пользоваться бесплатно。
Решения для сбора также включают заполнение правил, таких как регулярные выражения,и способом имитации браузера с функцией „что видишь, то и получишь“。
Программное обеспечение для сборщика
- Собиратель поездов:Все любят называть это «сборщиком локомотивов»,Возможно, это самый популярный на данный момент инструмент для сбора данных,За долгие годы обновления уже стали полноценными,Есть бесплатная версия,Есть все основные функции,Этого достаточно。
- В интернете распространяется взломанная корпоративная версия «Локомотива» 7.6、Взломанная версия программы «Собиратель поездов V9» («Герой скоростных поездов») с криптоключом для внутренней сети,Если средств достаточно,Поддерживайте оригинальные версии。
- Видеоуроки
- Поезд-браузер:С тем же производителем, что и выше,Визуальное управление,В бесплатной версии выполнение одной задачи ограничено 30 минутами。
- Программное обеспечение для сбора данных ET:Это тоже уже давно известный бренд,Полностью автоматизированная работа без участия человека。Есть бесплатная версия。
- VG — незаменимый инструмент для автоматизации:Прежнее название — браузер VG,VG — незаменимый инструмент для работы с веб-страницами,Основная функция — автоматизация работы с веб-страницами (автоматический вход、Автоматический сбор、Автоматическая отправка、Автоматическая регистрация、 Автоматическая публикация постов、Автоматическое распознавание капчи。)Есть бесплатная версия, Ограничить выполнение одного задания 30 минутами。
- Сборщик данных «Осьминог»:Требуется загрузить программное обеспечение,Однако сбор данных в флагманской версии может осуществляться в облаке,Можно взять, просто увидев,Можно собирать всё, что видно в браузере。Есть бесплатная версия,Бесплатная версия позволяет собирать данные только локально,При локальном сборе для экспорта, похоже, требуются баллы。
- Сборщик Хоу И:Инструмент для сбора данных, работающий в браузере по принципу „что видишь, то и получишь“,Также поддерживается Windows、Сборщик для всех операционных систем Mac и Linux。Бесплатное ПО для веб-скрапинга,Базовые функции, необходимые для сбора данных,Нет никаких ограничений,Не требуются баллы,Бесплатный экспорт собранных результатов。Однако для автоматического сбора данных по расписанию нужна платная версия。
- Видеоуроки | Руководство по работе с текстом
- Загрузить последнюю версию:http://www.houyicaiji.com/?type=download
Плагин для сбора
Сборщики данных типа плагина позволяют публиковать данные напрямую без необходимости создания интерфейса,Но это можно использовать только с одним конкретным CMS или BLOG。
Плагин для сбора данных WordPress
- WP-Автоблог:Исходный WP-AutoPost,Поддержка перевода на другие языки,Можно собирать аккаунты из официальных аккаунтов WeChat、Контент из самомедиа, таких как Toutiao,Поддержка загрузки удалённых изображений на локальный сервер。Есть бесплатная версия,Но есть ограничения по функциям。
- В интернете распространяется взломанная версия WP-AutoPost
- Сбор данных Пан Шу:Бесплатный и с открытым исходным кодом,Использовать Html,Синтаксис Jquery,Автоматический сбор и публикация статей,
- поиск в плагинах WordPress Сбор данных Пан Шу Просто установите
- Гитхаб Адрес репозитория с открытым исходным кодом
- Способ использования
- Длинноногий паук(WP-CTSPIDER):Бесплатное использование,Для использования полной версии необходимоОфициальный сайтБесплатное получение лицензии。Похоже, давно не обновлялось。Поддержка генерации уникального контента,Но нужно заполнить информацию самостоятельно。Поддерживает Baidu Translate。
Плагин для сбора данных DEDECMS
- Сборщик сновидений:Поддержка сбора данных через RSS,Выполняйте массовый сбор данных по ключевым словам, заданным пользователем。Без бесплатной версии
Сбор данных в облаке
- Сборщик данных Лань Тянь:Официальная основная система автоматизированного сбора и публикации данных в облаке,Можно интегрировать со всеми CMS или блогами,Но для этого нужен соответствующий плагин для публикации。Говорят, что это облако, но требуется находиться на том же сервере, что и сайт публикации,Невозможно опубликовать удалённо,Ощущение, что, возможно, это больше подходит для категории плагинов。
- Официально предоставляется поддержка большинства популярных CMS、БЛОГПлагин для публикации