Collecter des pages web et des données,Peut permettre de créer rapidement un site web。Outre l'utilisation d'un collecteur pour la saisie,Il est aussi possible de personnaliser des crawlers Python,Cependant, il faut savoir programmer。
Le collecteur dispose d'un logiciel indépendant、Diverses solutions telles que les plugins et la collecte cloud。Le logiciel indépendant nécessite un ordinateur dédié tournant en permanence,et l'interface de publication du CMS correspondant。La version du plugin et le site sont hébergés sur le même serveur.,La collecte ralentira le site web。Publier sur son propre site via le cloud coûte généralement assez cher。Pochette pas chère,On n'y mentionne que ce qui est utilisable gratuitement。
La solution de collecte inclut également le remplissage de règles telles que les expressions régulières,et la méthode de navigateur simulé WYSIWYG。
Logiciel du collecteur
- Collecteur de trains:Tout le monde aime appeler ça le collecteur « locomotive »,C'est probablement l'outil de collecte le plus utilisé actuellement,Des années de mises à jour l'ont déjà rendu très complet,Il existe une version gratuite,Toutes les fonctions de base sont présentes,C'est suffisant。
- Une version crackée de la version entreprise 7.6 de la locomotive circule en ligne、Collecteur de trains V9 (Gao Tie Xia), version crackée avec dongle de cryptage pour réseau interne,Si les fonds sont suffisants,Veuillez soutenir les versions officielles。
- Tutoriels vidéo
- Navigateur Train:Comme le fabricant mentionné ci-dessus,Opérations visuelles,La version gratuite limite l'exécution d'une tâche à 30 minutes。
- Logiciel de collecte ET:C'est aussi une marque établie depuis longtemps,Travail entièrement automatique et sans surveillance。Il existe une version gratuite。
- VG – l'outil d'automatisation:Nom d'origine : navigateur VG,VG – l'outil ultime pour les opérations web,Mettre l'accent sur l'automatisation des opérations web (connexion automatique)、Collecte automatique、Soumission automatique、Inscription automatique、 Publier automatiquement、ReCAPTCHA。)Il existe une version gratuite, Limitez l'exécution d'une seule tâche à 30 minutes。
- Collecteur Octopus:Le téléchargement d'un logiciel est requis,Cependant, la collecte de données de la version phare peut être effectuée dans le cloud,Ce qui est visible peut être cueilli,Tout ce qui est visible dans le navigateur peut être collecté。Il existe une version gratuite,La version gratuite ne permet que la collecte locale,Pour la collecte locale, il semble que l'exportation nécessite des points。
- Collecteur Hou Yi.:Outil de collecte de type navigateur WYSIWYG (ce que vous voyez est ce que vous obtenez),Compatible avec Windows、Collecteur compatible avec tous les systèmes d'exploitation Mac et Linux。Logiciel gratuit de scraping,Fonctionnalités de base nécessaires à la collecte de données,Aucune restriction,Pas besoin de points,Exporter gratuitement les résultats collectés。Cependant, pour automatiser la collecte à intervalles réguliers, il faut passer à la version payante。
- Tutoriels vidéo | Tutoriel textuel
- Télécharger la dernière version:http://www.houyicaiji.com/?type=download
Plugin de collecte
Les collecteurs de type plugin peuvent publier des données directement sans avoir à publier d'interface.,Mais cela ne peut être utilisé que pour un seul type de CMS ou de blog。
Plugin de collecte WordPress
- WP-AutoBlog:Ancien WP-AutoPost,Prise en charge de la traduction dans d'autres langues,Comptes officiels WeChat pouvant être collectés、Contenu de médias personnels tels que Toutiao,Prend en charge le téléchargement d'images distantes vers un serveur local。Il existe une version gratuite,Cependant, les fonctionnalités sont limitées。
- Une version crackée de WP-AutoPost circule sur Internet
- Collecte Pangshu:Gratuit et open source,Utiliser Html,Syntaxe jQuery,Collecte et publication automatiques d'articles,
- Recherche dans les plugins WordPress Collecte Pangshu Installez-le et c'est tout
- GitHub Adresse open source
- Mode d'emploi
- Araignée aux longues pattes(WP-CTSPIDER):Utilisation gratuite,Pour utiliser la version complète, il fautSite officielActiver gratuitement l'autorisation。Cela semble faire longtemps que rien n'a été mis à jour。Prend en charge la réécriture de contenu,Mais il faut le remplir soi-même。Prise en charge de Baidu Translate。
Plugin de collecte DEDECMS
- Collecteur de rêves:Prise en charge de la collecte RSS,Effectuez une collecte générale en fonction des mots-clés définis par l'utilisateur。Aucune version gratuite.
Collecte dans le cloud
- Collecteur Ciel bleu:Système officiel de collecte, d'automatisation et de publication de données basé sur le cloud,Peut être intégré à tous les CMS ou blogs,Cependant, un plugin de publication compatible est nécessaire。On prétend que c'est dans le cloud, mais qu'il faut être sur le même serveur que le site de publication,Impossible de publier à distance,J'ai l'impression que cela conviendrait mieux dans la catégorie des plugins。
- L'offre officielle inclut la plupart des CMS grand public、BLOGPlugin de publication