/api/v1/augment/scrape
Tools
웹 스크래핑
Scrape a web page and return its content as markdown. Supports most public web pages; some sites (e.g. X/Twitter, Reddit) that block automated access are rejected immediately.
Authentication: This endpoint accepts either a Bearer API key or a SIGN-IN-WITH-X header for x402 wallet-based authentication. The legacy X-Sign-In-With-X header is also accepted during migration. When using x402, a 402 Payment Required response indicates insufficient balance and includes top-up instructions.
POST
/api/v1/augment/scrape
url 필드에 공개적으로 접근 가능한 URL을 보내세요. API는 페이지 콘텐츠를 markdown으로 반환합니다.
스크래퍼는 먼저 대상 사이트의 네이티브 markdown 지원(Cloudflare Markdown for Agents 사용)을 시도한 다음 헤드리스 브라우저 추출로 폴백합니다. 자동화된 접근을 차단하는 일부 사이트(예: X/Twitter, Reddit)는 400 오류와 함께 즉시 거부됩니다.
가격: 요청당 $0.01.
예제 (cURL)
인증
Bearer authentication header of the form Bearer <token>, where <token> is your auth token.
본문
application/json
The URL to scrape
예시:
"https://example.com"