카페크롤러v3
Вставка
- Опубліковано 21 вер 2024
- [카페크롤러]
카페와 게시판을 지정하여 글작성자, 댓글 작성자 아이디를 수집합니다
1. 카페 일반게시판 크롤링
- 갯수 제한없이 특정 카페들을 지정해
각각의 게시판에 글작성, 댓글 작성을 한 회원들의 아이디를
크롤링하여 데이터를 모아줍니다
해당 카페에서 크롤링 원하는 게시판을 선택하면
각 게시판 별 한페이지당 50개씩 최대 1000페이지까지 작업이 가능합니다
(선택한 게시판이 10개인 경우 최대 50만개의 게시물을 대상으로
중복작성자를 제외하고 크롤링이 가능합니다)
크롤링 된 데이터는 아이디, 메일 형식으로 저장하실 수 있습니다
2. 전체글보기 게시판 크롤링
- 해당 카페의 최근게시물 게시판인 전체글보기 게시판에서
한 페이지당 50개씩 최대 1000페이지까지 크롤링 가능합니다
3. 해당 카페에 가입된 계정 로그인을 통해 카페위젯 크롤링
- 크롤링 할 해당 카페에 가입된 계정 로그인을 통해 카페 위젯에 나오는
방문회원, 접속회원, 신입회원을 반복적으로 크롤링 할 수 있습니다
4. 해당 카페에 가입된 계정 로그인을 통해 채팅 초대 가능 멤버
- 크롤링 할 해당 카페에 가입된 계정 로그인을 통해
채팅 초대 가능 멤버를 수집할 수 있습니다 (채팅 허용 된 카페만 가능)