- Web Search devuelve resultados estructurados con títulos, URL, fragmentos y fechas.
- Web Scrape convierte una página pública seleccionada en Markdown.
Busca en la web
Envía una consulta a la API de Search:Elige un proveedor
Todos los proveedores aceptan la misma solicitud y cuestan lo mismo por búsqueda, así que cambiar de proveedor es cuestión de modificar un campo. La diferencia está en lo que devuelven:
Los resultados más largos se convierten en tokens de entrada cuando los pasas a un modelo, así que cuestan más y tardan más en procesarse. Si los resultados van directamente a un prompt, limita cuántos incluyes y cuánto texto aporta cada uno. Con
google, conserva los pasajes que coinciden con la consulta en lugar del inicio de cada resultado, que suele ser navegación o un banner de cookies.
Para ver cómo se comparan los proveedores en relevancia, precisión de las respuestas, latencia y coste en tokens, lee Benchmark de proveedores de búsqueda web. Enlaza al harness del benchmark, así que puedes repetir la comparación con tus propias preguntas.
Extrae una página
Después de seleccionar un resultado, envía su URL pública a la API de Scrape:Flujo de búsqueda y extracción
1
Busca
Envía una consulta específica y recopila los resultados estructurados.
2
Selecciona las fuentes
Filtra los resultados por relevancia, dominio y fecha antes de obtener el contenido de las páginas.
3
Extrae
Extrae Markdown solo de las páginas que tu aplicación tenga previsto utilizar.
4
Usa o almacena el contenido
Incluye el Markdown en un prompt, crea embeddings, guárdalo en caché o conserva las URL de origen para las citas.
429; reinténtalas con backoff exponencial y limita el scraping en paralelo a un pool pequeño.