es.phhsnews.com


es.phhsnews.com / Cómo extraer enlaces de cualquier página web con PowerShell

Cómo extraer enlaces de cualquier página web con PowerShell


PowerShell 3 tiene muchas funciones nuevas, incluidas algunas funciones nuevas y potentes relacionadas con la web. Simplificaron enormemente la automatización de la Web, y hoy vamos a mostrar cómo puede extraer cada enlace de una página web y, opcionalmente, descargar el recurso si lo desea.

Raspar la Web con PowerShell

Hay dos nuevos cmdlets que facilitan la automatización de la web, Invoke-WebRequest que facilita el análisis de contenido legible por humanos, e Invoke-RestMethod que hace que el contenido legible por máquina sea más fácil de leer. Como los enlaces son parte del HTML de una página, forman parte de las cosas legibles para los humanos. Todo lo que tienes que hacer para obtener una página web es usar Invoke-WebRequest y darle una URL.

Invoke-WebRequest -Uri '//phhsnews.com'

Si te desplazas hacia abajo verás que la respuesta ha sido una propiedad de enlaces, podemos usar la función de enumeración de miembros nuevos de PowerShell 3 para filtrarlos.

(Invoke-WebRequest -Uri '//phhsnews.com'). Enlaces

Como puede ver, obtiene mucho de enlaces hacia atrás, aquí es donde necesita usar su imaginación para encontrar algo único para filtrar los enlaces que está buscando. Supongamos que queremos una lista de todos los artículos en la página principal.

((Invoke-WebRequest -Uri '//phhsnews.com') .Links | Where-Object {$ _. Href -like "http * "} | Donde clase -eq" título "). Título

Otra gran cosa que puedes hacer con los nuevos cmdlets es automatizar las descargas diarias. Veamos cómo raspa automáticamente la imagen del día fuera del sitio web de Nat Geo, para ello combinaremos los nuevos cmdlets web con Start-BitsTransfer.

$ IOTD = ((Invoke-WebRequest -Uri ' // photography.nationalgeographic.com/photography/photo-of-the-day/').Links | Where innerHTML -like "* Descargar Wallpaper *"). href
Start-BitsTransfer-Source $ IOTD -Destination C: IOTD

Eso es todo lo que hay que hacer. ¿Tienes algunos buenos trucos propios? Háganos saber en los comentarios.


Cómo evitar que iPhoto se inicie cuando se conecta un iPhone, iPad o tarjeta de memoria

Cómo evitar que iPhoto se inicie cuando se conecta un iPhone, iPad o tarjeta de memoria

Después de cambiar a OS X, hubo una gran molestia que sucedía una y otra vez, cada vez que conecte cualquier cosa en mi MacBook y tiene una carpeta DCIM en el sistema de archivos, iPhoto se iniciará de inmediato y comenzará a escanear. RELACIONADO: ¿Por qué todas las cámaras colocan fotos en una carpeta DCIM?

(how-to)

Cómo usar Apt-Get para instalar programas en Ubuntu desde la línea de comandos

Cómo usar Apt-Get para instalar programas en Ubuntu desde la línea de comandos

Ubuntu tiene una gran cantidad de métodos basados ​​en GUI para instalar aplicaciones, pero se toman un tiempo para buscar y encontrar. Como el teclado suele ser más rápido que el mouse, administrar el software a través de la línea de comandos puede ahorrarle tiempo. APT Linux administra el software a través de paquetes, unidades individuales de software que contienen interfaces de usuario, módulos, y bibliotecas.

(how-to)