자주 묻는 질문
크롤링·스크래핑 외주 의뢰 전 가장 많이 받는 질문들을 모았습니다. 더 궁금한 점이 있으면 카카오톡 오픈채팅으로 편하게 문의해 주세요.
Q.크롤링/스크래핑은 합법인가요?
A.대부분의 공개 정보 수집은 합법입니다. 다만 (1) 사이트 이용약관 위반 여부, (2) 저작권이 있는 콘텐츠의 무단 복제, (3) 개인정보보호법 적용 데이터 수집은 주의가 필요합니다. 의뢰 받기 전에 법적 리스크를 함께 검토하고, 문제가 될 만한 사이트는 정중히 거절합니다. 공공데이터, 가격 정보, 공개된 공시 정보 등은 일반적으로 안전합니다.
Q.어떤 사이트든 크롤링이 가능한가요?
A.기술적으로는 거의 모든 사이트가 가능합니다. 다만 (1) Cloudflare 강한 차단 적용 사이트, (2) 강력한 캡차/봇 탐지 시스템 적용 사이트, (3) 로그인 후에만 접근 가능한 데이터는 비용/시간이 더 듭니다. 사이트 URL을 알려주시면 무료로 기술 검토 후 가능 여부와 난이도를 알려드립니다.
Q.비용은 어떻게 산정되나요?
A.비용은 크게 4가지로 결정됩니다: (1) 대상 사이트 복잡도 (정적 HTML vs SPA vs 로그인 필요), (2) 수집 데이터 양과 종류, (3) 자동화 깊이 (1회성 vs 정기 실행 vs 알림 시스템), (4) 결과물 형태 (엑셀 vs DB vs 대시보드). 단발성 30만원부터, 시스템 구축 100만원부터 시작하며 평균 200~500만원입니다.
Q.작업 기간은 얼마나 걸리나요?
A.단발성 작업은 3~7일, 시스템 구축은 2~6주가 일반적입니다. 사이트 복잡도와 요구사항에 따라 다르며, 정확한 일정은 견적 시 함께 안내드립니다. 급한 작업은 우선순위 조정 가능 (추가 비용).
Q.사이트 구조가 바뀌면 크롤러가 멈추지 않나요?
A.네, 사이트 HTML 구조가 변경되면 크롤러가 작동하지 않을 수 있습니다. 이 부분이 크롤링 시스템 운영의 가장 큰 비용입니다. (1) 시스템 구축 시 6개월 무상 A/S 포함, (2) 그 이후로는 월정기 운영 서비스(30만원/월~)로 사이트 변경 시 24시간 이내 대응합니다. 또는 사이트 변경 감지 + 알림 시스템을 함께 구축해 직접 대응 가능하게 할 수도 있습니다.
Q.소스 코드를 받을 수 있나요?
A.네, 모든 프로젝트는 소스 코드(Python 기준)와 함께 전달됩니다. GitHub 비공개 저장소로 제공하거나 압축 파일로 전달 가능. 코드 사용법 문서와 환경 설정 가이드도 함께 제공합니다. 기업 내부 개발자가 인수받아 유지보수하실 수 있도록 깔끔하게 작성합니다.
Q.결과물은 어떤 형태로 받나요?
A.용도에 맞춰 다양하게 가능합니다: (1) 엑셀(.xlsx) — 가장 일반적, (2) CSV — 대용량 데이터, (3) PostgreSQL/MySQL DB — 시스템 연동, (4) JSON API — 다른 시스템과 통합, (5) 텔레그램/슬랙/이메일 알림 — 실시간 모니터링, (6) 웹 대시보드 — 시각화 필요 시. 상담 시 가장 적합한 형태를 함께 정합니다.
Q.비밀유지계약(NDA)을 체결할 수 있나요?
A.네, 가능합니다. 기업 의뢰의 경우 표준 NDA를 제공하거나 회사 NDA 양식에 서명합니다. 의뢰 내용·수집 데이터·소스 코드 모두 외부 공유하지 않습니다. 단, 일반적인 기술 사례를 익명화하여 블로그에 소개하는 것은 별도 협의 가능합니다.
Q.크몽/숨고 같은 플랫폼과 차이점은 무엇인가요?
A.플랫폼 외주는 단가가 낮지만 (1) 결과물 품질 편차가 크고, (2) 사후 관리가 어려우며, (3) 고난도 작업은 거절되는 경우가 많습니다. 매크로 마스터는 (1) 직접 의뢰로 중간 수수료 없음, (2) 한국 공공·금융 데이터 전문성 (DART, 법령, KRX 등), (3) 시스템 구축 후 6개월 A/S, (4) 사이트 구조 변경 대응 가능. 단가는 비슷하거나 약간 높을 수 있지만 TCO(총비용)는 낮습니다.
Q.결제는 어떻게 진행하나요?
A.계약금 50% (착수 시) + 잔금 50% (납품 후 검수 완료). 50만원 미만 단발성 작업은 납품 후 일괄 결제 가능. 세금계산서 발행 가능 (간이과세). 큰 금액의 경우 분할 결제 협의 가능.
Q.비개발자도 의뢰 가능한가요?
A.네, 오히려 가장 많은 의뢰 유형입니다. 마케팅 담당자, 부동산 중개사, 회계사, 자영업 사장님 등 비개발자분들이 주 고객입니다. 사용법은 영상 + 문서로 안내드리며, 결과물은 가장 사용하기 쉬운 엑셀 형태로 전달하는 게 일반적입니다.
Q.ChatGPT로 직접 코드를 짜봤는데 잘 안돼요. 도와주실 수 있나요?
A.네, 자주 받는 케이스입니다. ChatGPT가 만든 코드는 (1) 동적 페이지/JavaScript 렌더링 처리가 약하고, (2) 차단 우회·세션 관리·에러 핸들링이 부족하며, (3) 유지보수가 어려운 경우가 많습니다. 기존 코드를 보내주시면 어디가 문제인지 무료로 진단하고, 새로 만드는 게 나을지 보완하는 게 나을지 판단해 드립니다.