MarkUDown
API de Batch Scrape — documentação de scraping em lote MarkUDown
POST
/api/batch-scrapeScrape em Lote
Extraia múltiplas URLs em paralelo em uma única requisição. Mais eficiente do que fazer chamadas de scrape separadas.
| Parâmetro | Tipo | Obrigatório | Padrão | Descrição |
|---|---|---|---|---|
| url | array<string> | obrigatório | — | Lista de URLs a coletar. Cada URL custa 1 crédito. |
| main_content | boolean | opcional | true | Extrai só o conteúdo principal (descarta navegação, cabeçalho e rodapé). |
| include_link | boolean | opcional | false | Inclui os links encontrados na página. |
| include_html | boolean | opcional | false | Também devolve o HTML da página junto com o Markdown. |
| exclude_tags | array<string> | opcional | ["header","nav","footer"] | Seletores CSS ou nomes de tags a remover, por exemplo ["nav",".ads","footer"]. |
| timeout | integer | opcional | 60 | Tempo limite por página, em segundos. |
Requisição
{
"url": [
"https://example.com/page1",
"https://example.com/page2",
"https://example.com/page3"
],
"main_content": true
}Resposta
// POST returns { "success": true, "id": "abc123", "url": "/api/batch-scrape/abc123" }
// Poll GET /api/batch-scrape/{id} — "data" when completed:
{
"success": true,
"total": 3,
"completed": 3,
"failed": 0,
"data": [
{
"url": "https://example.com/page1",
"markdown": "# Page 1\n\nContent...",
"metadata": { "title": "Page 1", "statusCode": 200 }
}
]
}