Te voy a presentar un par de opciones para poder sacar todas las URL de las SERP en menos de 30 segundos. En una de ellas podrás conseguir obtener todas las URL tras realizar una búsqueda en Google de todos los módulos de resultados, es decir, resultados normales, imágenes, preguntas, wikipedia, noticias. En el otro, podrás sacar las URL y los titles de cada una de ellas

Opción 1:  Sin extensiones de Chrome, sin necesidad de codificación o conocimientos complejos

Es un script muy simple que automatiza instantáneamente el proceso de raspado. Se tarda menos de 2 minutos en implementarse en su navegador.

  • Paso 1: Abre una nueva pestaña en Chrome. (Puede ser literalmente cualquier página).
  • Paso 2: Márcalo como favorito y dale el nombre que quieras, por ejemplo (SERP Scraper).
  • Paso 3: Reemplaza la URL del marcador con el siguiente script:

Script para añadir al marcador

javascript:var a = document.getElementsByTagName(‘a’), arr = »;for(var i=0; i<a.length; i++) if (a[i].ping && !a[i].href.includes(‘google’))arr +=(‘<p>’ + a[i].href + ‘</p>’);var newWindow = window.open();newWindow.document.write(arr);newWindow.document.close();

SACAR TODAS LAS URL Y TITLES CON EXTENSIÓN DE CHROME

Opción 2: En este caso necesitas instalarte una extensión que utilizo muy a menudo para mis proyectos SEO, la extensión se llama: Simplescrper, es más completa que la opción anterior. Ya que te permite scraper no solo las SERP, sino cualquier parte de una URL de cualquier web.

Lo puedes ejecutar localmente en tu navegador (sin necesidad de registrarse) y también tienes la opción de scrapear de manera automatizada.

  • Paso 1: Instalar la extensión Simplescrper
  • Paso 2: Haz una búsqueda o selecciona una URL que quieras scrapear
  • Paso 3: Haz clic en la extensión de favoritos y selecciona “Scrape this website”
  • Paso 4: En la parte superior izquierda se abrirá una barra para añadir propiedades con un icono de “+”, hazle clic y define el nombre que quieras, mi recomendación es que le pongas el nombre de lo que vayas a scrapear, por ejemplo: URLs
  • Paso 5: Pasa el cursor por encima de los módulos de resultados de las SERP o de la URL de la web, escoge el módulo que quieras y haz clic. Verás que todos los módulos de esa búsqueda se han seleccionado en color verde.
  • Paso 6: Vuelve a la parte superior izquierda y selecciona el icono de , luego en la parte superior derecha, te aparecera una opción de color verde que pone “View results”. Hazle clic y se te abrirá una pestaña nueva con todas las URL o titles que hayas seleccionado previamente.

*Puedes descargarlo todo en formato CSV o JSON para luego pasarlo a Excel o Google Sheets.

Aquí te dejo un video de como hacerlo para que quede más claro