웹페이지 및 데이터 수집,빠르게 웹사이트를 만들 수 있습니다。수집기를 사용하는 것 외에도,Python 크롤러 맞춤 제작도 가능합니다,하지만 프로그래밍을 할 줄 알아야 합니다。
수집기는 독립적인 소프트웨어를 갖추고 있습니다、플러그인 및 클라우드 수집 등 다양한 방식。독립 소프트웨어는 별도의 컴퓨터에서 계속 실행해야 함,해당 CMS의 게시 인터페이스와。플러그인 버전과 사이트는 동일한 서버에 있습니다,스크래핑은 웹사이트 속도를 저하시킵니다。클라우드 서비스를 자신의 웹사이트에 배포하려면 보통 상당한 비용이 듭니다。주머니 사정이 넉넉지 않다,여기에서는 무료로 사용할 수 있는 것만 언급합니다。
수집 솔루션에는 정규식 등의 규칙을 입력하는 기능도 있습니다,WYSIWYG 방식의 시뮬레이션 브라우저 방식。
목차
표시
수집기 소프트웨어
- 트레인 수집기:모두 '기관차 수집기'라고 부르는 걸 좋아합니다,아마도 현재 가장 많이 사용되는 수집기일 것입니다,수년간의 업그레이드를 통해 이미 완벽해짐,무료 버전이 있습니다,기본 기능은 모두 갖추고 있습니다,충분합니다。
- 온라인에는 Train-Head 7.6 기업용 크랙 버전이 떠돌고 있습니다、기관차 수집기 V9(고속철도 히어로) 내부망 암호화 동글 버전 크랙 버전,자금이 충분한 경우,정품을 이용해 주세요。
- 동영상 튜토리얼
- 트레인 브라우저:위와 동일한 제조업체,시각화 작업,무료 버전은 단일 작업 실행 시간을 30분으로 제한합니다。
- ET 수집 소프트웨어:오래된 브랜드이기도 합니다,완전 자동 무인 작업。무료 버전이 있습니다。
- VG 자동화 필수 도구:이전 이름은 VG 브라우저,VG 웹 작업 필수 도구,주요 웹페이지 자동화 작업(자동 로그인、자동 수집、자동 제출、자동 등록、 게시물 자동 작성、자동으로 인식하여 인증 코드 식별。) 무료 버전 있음, 단일 작업 실행 30분 제한。
- Octoparse 수집기:소프트웨어를 다운로드해야 합니다,하지만 플래그십 버전의 수집 작업은 클라우드에서 수행할 수 있습니다,눈으로 보고 바로 채취 가능,브라우저에서 보이는 것은 모두 수집 가능。무료 버전이 있습니다,무료 버전은 로컬 수집만 가능,로컬에서 수집한 경우 내보내기에 포인트가 필요한 것 같습니다。
- 허우이 수집기:WYSIWYG 방식의 브라우저 기반 수집 도구,동시에 Windows를 지원합니다、Mac 및 Linux 전체 운영 체제용 수집기。무료 크롤러 소프트웨어,데이터 수집에 필요한 기본 기능,어떠한 제한도 없습니다,포인트가 필요 없습니다,수집 결과 무료 내보내기。하지만 자동 수집을 설정하려면 유료 버전을 사용해야 해요。
- 동영상 튜토리얼 | 텍스트 튜토리얼
- 최신 버전 다운로드:http://www.houyicaiji.com/?type=download
수집 플러그인
플러그인형 수집기는 인터페이스를 게시하지 않고도 데이터를 직접 게시할 수 있습니다,하지만 하나의 CMS 또는 BLOG에서만 사용할 수 있습니다。
WordPress 수집 플러그인
- WP-자동 블로그:기존 WP-AutoPost,다른 언어 번역 지원,위챗 공식 계정 정보 수집 가능、Toutiao 계정 등 소셜 미디어 콘텐츠,원격 이미지를 로컬 서버로 다운로드 지원。무료 버전이 있습니다,하지만 기능에 제한이 있습니다。
- 온라인에는 WP-AutoPost 크랙 버전이 떠돌고 있습니다
- 팡쥐 채집:무료 오픈 소스,Html 사용,Jquery 구문,자동으로 기사 수집 및 게시,
- wordpress 플러그인 검색 팡쥐 채집 설치만 하면 됩니다
- 다리 긴 거미(WP-CTSPIDER):무료 사용,전체 기능을 사용하려면공식 웹사이트무료로 권한 활성화하기。오래전에 업데이트가 중단된 것 같습니다。가짜 원작 지원,하지만 직접 입력해야 합니다。바이두 번역 지원。