Entidad estable
Identidad del producto
Marca, modelo, título canónico, categorías, identificadores, descripciones, atributos y medios.
- ASIN / SKU / GTIN / MPN
- Brand & model
- Category & attributes
Productos, precios y reseñas
Raspado de datos de productos, precios y reseñas
Recopila productos, precios, promociones, existencias, vendedores y reseñas para análisis minorista. Elige APIs de comercio estructuradas, conjuntos de datos o feeds periódicos.
Modelo de registro comercial
Conecta productos, ofertas, vendedores y reseñas.
Separar la identidad de las observaciones que cambian según el vendedor, ubicación, página y tiempo. El resultado es más fácil de comparar, actualizar y gobernar.
Configuración
Variante
Tamaño, color, capacidad, unidad, paquete, estilo u otra configuración definida por la fuente de un producto.
- Variant identifier
- Option labels
- Parent relationship
Observación limitada en el tiempo
Ofrece
Precio, precio de lista, promoción, condición, disponibilidad, envío, recogida y contexto de cumplimiento.
- Value & currency
- Seller & condition
- Observed context
Entidad del mercado
Vendedor
La identidad del comerciante público y el contexto de la tienda se mantienen separados del producto y se le ofrecen suministros.
- Seller ID & name
- Storefront URL
- Public rating context
El feedback público
Revisar
Reuniendo las calificaciones, las distribuciones, los recuentos y los campos de nivel de revisión donde el punto final o el alcance seleccionado los respalde.
- Rating & count
- Review text & date
- Source-level availability
Cobertura de la fuente
Comprueba las fuentes y la cobertura de campos.
Revisa la fuente, el tipo de página, el mercado y los campos que necesitas antes de elegir una API o una recopilación personalizada.
Documentado
Puntos finales del comercio estructurado
La documentación actual enumera las APIs de mercado y minoristas con contratos de solicitud y respuesta específicos de la fuente.
- Amazon
- eBay
- Walmart
- Best Buy
- Home Depot
- Lowe's
- Nordstrom
- Target
- Wayfair
Pilot primero
Fuentes adicionales de comercio público elegibles
Las fuentes de venta al por menor, mercado, marca, comparación y revisión se evalúan con páginas representativas antes de un compromiso recurrente.
- Required page families and discovery inputs
- Country, postal, language, and device context
- Field presence, optional modules, and failure states
- Cadence, volume, retention, and delivery fit
No estándar
Superficies de clientes privados o transaccionales
Los datos de cuentas privadas, carros, facturación o clientes están fuera del alcance de la web pública estándar.
- Authenticated customer accounts
- Orders and transaction records
- Personalized checkout totals
- Internal retailer inventory systems
Campos y registros de ejemplo
Consulta los campos de un registro de ejemplo.
Comience desde los campos que necesita su sistema, luego mapee los valores de origen, módulos opcionales, identificadores y estados de calidad en un esquema documentado.
Identidad
product_id · source_product_id · brand · title · category · attributes · media
Variante
variant_id · parent_id · size · color · unit · pack_quantity · option_labels
Ofertas y precios
current_price · list_price · currency · promotion · condition · seller_id
Disponibilidad y cumplimiento
availability_text · normalized_state · shipping · pickup · delivery_window
Clasificaciones y comentarios
rating · rating_count · review_count · distribution · review_items
Providencia y calidad
source_url · observed_at · requested_context · collection_state · schema_version
{
"record_id": "obs_001",
"schema_version": "commerce.v1",
"product": {
"source_product_id": "DEMO-128",
"brand": "Example",
"title": "Wireless headphones",
"variant": { "color": "black" }
},
"offer": {
"current_price": 79.00,
"list_price": 99.00,
"currency": "USD",
"availability_text": "In stock"
},
"rating": {
"value": 4.6,
"count": 1248
},
"source_url": "https://retailer.example/p/001",
"observed_at": "YYYY-MM-DDThh:mm:ssZ",
"collection_state": "observed"
}Identidad y coincidencia
Normaliza sin borrar la fuente.
Mantenga la observación original, luego añada una capa de identidad contraída sólo cuando la comparación sea explicable y testable.
- 01Identidad del productoSony · WH-1000XM5
- 02VarianteColor: negro
- 03Ofrece observaciónEl vendedor, el precio, la disponibilidad, la URL y observed_at siguen siendo específicos de la fuente
ResultadoAparecido por reglaProducto y variante negra vinculados · listado de origen conservado
Frescos y historia
La frescura es un contrato de campo, no una insignia.
Especifique cuándo se debe ejecutar la recopilación, qué timestamp tiene un registro y qué cambios deben convertirse en historia en lugar de valores sobrescritos.
En el momento de la solicitud
Llame a un punto de destino documentado.
La respuesta representa la página apoyada y el contexto solicitado cuando se procesa la solicitud.No sincronizado
Envíe trabajo, luego recupera una instantánea.
Los puntos finales de los minoristas seleccionados devuelven un identificador instantáneo mientras se preparan registros estructurados.Programación
Refrenece un conjunto de fuentes acordado.
La cadencia puede diferir por fuente, familia de páginas, nivel de producto y volatilidad de campo.Los puntos de longitud
Mantener las observaciones y los cambios.
La historia comienza con la recopilación a menos que se valide una fuente histórica separada.Calidad y falta
Haga que cada no-valor se explique a sí mismo.
La calidad no es un porcentaje de precisión, sino un conjunto de controles acordados y estados observables adjuntos al campo, registro, fuente y entrega.
Estado de la UniónSignificadoAcción a la baja
The supported field or object was returned in the requested context.
Use with timestamp and sourceThe page was collected, but the selected module or field was not displayed.
Keep distinct from zeroThe page or object was not available in the requested public context.
Do not infer inventoryThe collection event did not produce a usable page or supported response.
Retry or escalate by contractA value did not meet the agreed structure, type, or parsing rule.
Quarantine with reasonIdentity cues were incomplete, conflicting, or below the agreed threshold.
Keep source record availableOpciones de entrega
Elige cómo obtener tus datos.
Usa una API en tu aplicación, recibe registros periódicos o encárganos la recopilación.
Proxies
Conserva tus sistemas de recopilación y usa nuestra red de proxies.
Usa proxies residenciales, de centro de datos o de ISP con los sistemas de recopilación que tu equipo ya utiliza.
CaracterísticaDetalles
RecibesAcceso proxy para tus propias solicitudes
Nos encargamos deRed proxy y acceso
Tu parteRecopilación, extracción, almacenamiento y análisis
Ideal para · Equipos con sistemas de recopilación existentes.
Explore Infraestructura de proxies¿Qué equipos construyen
Pon estos registros a trabajar.
Usa los campos y ejemplos siguientes para planificar tu análisis, producto o flujo de seguimiento.
Pilotante representativo
Prueba una muestra en tu propio flujo de trabajo.
Un piloto útil prueba las combinaciones de fuentes y campos más difíciles, no sólo las páginas de productos más limpias.
- 01
Breve
Nombre de los objetos y contextos.
Fuentes, tipos de páginas, identificadores, mercados, ubicaciones, dispositivos, campos, cadencia y exclusiones. - 02
Muestra
Recoge páginas representativas.
Incluya variantes, promociones, múltiples vendedores, módulos faltantes, páginas no disponibles y revisa las diferencias. - 03
Contrato
Aprobar los estados de esquema y calidad.
Definiciones de campo, mapeo de origen, reglas de coincidencia, códigos de razón, historial, aceptación y formato de entrega. - 04
Entrega de dinero
Elige el modelo de operación.
Utilice el alcance validado para asignar acceso, extracción, mantenimiento, calidad, entrega y propiedad de la decisión.
Preguntas comunes
Preguntas antes de empezar
¿Qué datos de productos y comercio puede proporcionar WebScrapingAPI?
Recopila productos, precios, promociones, existencias, vendedores y reseñas para análisis minorista. Elige APIs de comercio estructuradas, conjuntos de datos o feeds periódicos.
¿Qué fuentes comerciales se documentan hoy?
Explora APIs de comercio para Amazon, Walmart, eBay y otros minoristas compatibles. Cada página de fuente muestra los tipos de página y campos que puedes comprobar en una muestra.
¿Se pueden entregar comentarios y calificaciones?
Las calificaciones, recuentos de revisiones, distribuciones de calificaciones o extractos de revisiones se documentan para puntos finales de productos seleccionados y también se pueden evaluar en un programa de datos de alcance. Los campos de revisión varían según la fuente y el tipo de página, y un resumen de calificación no debe presentarse como cobertura completa de revisión a menos que esa cobertura sea verificada.
¿Cómo se relacionan el producto, la variante, la oferta, el vendedor y los registros de revisión?
El modelo de datos mantiene la identidad del producto estable separada de las variantes de la fuente, las ofertas limitadas en el tiempo, el contexto del vendedor y las observaciones de revisión. Cada objeto puede conservar su URL de origen, identificador de fuente, contexto solicitado, tiempo de observación y estado de recopilación para que los equipos en aguas subyacentes puedan unir los registros sin borrar de dónde provenían.
¿Puede coincidir el mismo producto en todas las fuentes?
La correspondencia puede incluirse en un feed o programa gestionado. La muestra confirma identificadores, reglas de comparación y cómo se muestran coincidencias inciertas o contradictorias.
¿Qué tan frescos pueden ser los datos sobre los productos y los precios?
Las APIs recopilan datos cuando se las llama. Los feeds y Managed Data siguen un calendario acordado y separan las marcas de tiempo de origen y recopilación cuando están disponibles.
¿Se pueden entregar cambios históricos en el precio, el vendedor y la disponibilidad?
El historial empieza al iniciar el seguimiento. La cobertura anterior depende de registros de origen o capturas de archivo disponibles. Revisa fechas y lagunas en una muestra.
¿Cómo se representan los campos faltantes y las colecciones fallidas?
La muestra distingue campos ausentes, páginas no disponibles, solicitudes fallidas y valores que requieren revisión. Acuerda el tratamiento de cada estado antes de la entrega periódica.
¿Quién mantiene la recolección cuando cambia una página de comercio?
Tu equipo mantiene los sistemas de recopilación con proxies y los parsers propios con APIs de acceso a páginas. Nosotros mantenemos la extracción compatible de Data API y la recopilación incluida en feeds o Managed Data.
¿Qué límites de uso responsable y de datos se aplican?
El alcance se limita a las páginas web públicas elegibles y a los campos públicos acordados. Los datos de cuenta privada, carrito, caja, pedido y cliente no son el alcance estándar. Los clientes siguen siendo responsables del uso legal, la retención, los controles de acceso y los precios, la comercialización, la ejecución u otras decisiones tomadas con los datos entregados.
Productos, precios y reseñas
Comience con un punto final o un resumen de datos representativos.
Utilice una API de comercio documentada en su propio flujo de trabajo, o muestre las fuentes, campos, contexto y ventana de actualización que su equipo necesita entregar.