특급기일하기 › 밖에서 가져오기·골라서 넣는 뭉치
도매처 상품 수집
아직 없음도매처 페이지에서 상품명·원가·옵션·사진을 정확히 가져오는 부분입니다. 여기가 틀리면 뒤가 다 틀립니다.
사이트에서 바로 보기
아직 우리 뼈대에 들어오지 않아 볼 화면이 없습니다. 설정 마법사에서 이 뭉치가 골라지면 그때 설치합니다.
※ 도매처 수집 부품(Crawlee 등)은 아직 안 깔렸습니다. 예의 바른 수집은 준법 데이터 수집 뭉치에 있습니다.
지키는 규칙
- 공식 연동 방법(API)이 있으면 긁지 않고 그것을 쓴다.
- 한글 페이지가 CP949 인 곳이 있다 — iconv-lite 로 변환해서 읽는다.
- 원가 0원·사진 없음 같은 이상한 값이면 즉시 멈추고 알린다. 조용히 넘기지 않는다.
- 접속 간격을 두고 robots 규칙을 지킨다 — 차단당하면 사업이 멈춘다.
- 상품 20개를 손으로 대조해 전부 맞을 때까지 대량 수집하지 않는다.
쓰는 부품
- Crawlee안 깔림
- Playwright✓ 깔림
- Cheerio✓ 깔림
- iconv-lite안 깔림
- p-queue✓ 깔림
- robots-parser✓ 깔림
마법사에서 언제 들어가나
이 종류를 고르면: 해외 역직구·마켓 자동화
이 질문에 「예」 하면: 없음
겹치는 뭉치 — 「해외 역직구」 메뉴로 합쳐 둠
넷이 한 줄로 이어진다 — 도매처에서 모으고 → 걸러내고 → 마켓에 올리고 → 배송까지.
이 뭉치의 급
특급기AI·해외 역직구처럼 가장 손이 많이 간다. 바깥 열쇠나 외부 서비스가 필요하다.