es.phhsnews.com


es.phhsnews.com / Cómo extraer enlaces de cualquier página web con PowerShell

Cómo extraer enlaces de cualquier página web con PowerShell


PowerShell 3 tiene muchas funciones nuevas, incluidas algunas funciones nuevas y potentes relacionadas con la web. Simplificaron enormemente la automatización de la Web, y hoy vamos a mostrar cómo puede extraer cada enlace de una página web y, opcionalmente, descargar el recurso si lo desea.

Raspar la Web con PowerShell

Hay dos nuevos cmdlets que facilitan la automatización de la web, Invoke-WebRequest que facilita el análisis de contenido legible por humanos, e Invoke-RestMethod que hace que el contenido legible por máquina sea más fácil de leer. Como los enlaces son parte del HTML de una página, forman parte de las cosas legibles para los humanos. Todo lo que tienes que hacer para obtener una página web es usar Invoke-WebRequest y darle una URL.

Invoke-WebRequest -Uri '//phhsnews.com'

Si te desplazas hacia abajo verás que la respuesta ha sido una propiedad de enlaces, podemos usar la función de enumeración de miembros nuevos de PowerShell 3 para filtrarlos.

(Invoke-WebRequest -Uri '//phhsnews.com'). Enlaces

Como puede ver, obtiene mucho de enlaces hacia atrás, aquí es donde necesita usar su imaginación para encontrar algo único para filtrar los enlaces que está buscando. Supongamos que queremos una lista de todos los artículos en la página principal.

((Invoke-WebRequest -Uri '//phhsnews.com') .Links | Where-Object {$ _. Href -like "http * "} | Donde clase -eq" título "). Título

Otra gran cosa que puedes hacer con los nuevos cmdlets es automatizar las descargas diarias. Veamos cómo raspa automáticamente la imagen del día fuera del sitio web de Nat Geo, para ello combinaremos los nuevos cmdlets web con Start-BitsTransfer.

$ IOTD = ((Invoke-WebRequest -Uri ' // photography.nationalgeographic.com/photography/photo-of-the-day/').Links | Where innerHTML -like "* Descargar Wallpaper *"). href
Start-BitsTransfer-Source $ IOTD -Destination C: IOTD

Eso es todo lo que hay que hacer. ¿Tienes algunos buenos trucos propios? Háganos saber en los comentarios.


El mayor error de diseño que Apple ha cometido en el pasado Dos años

El mayor error de diseño que Apple ha cometido en el pasado Dos años

Apple ha perdido su mojo. Su obsesiva atención al detalle parece haberse esfumado. Cuando Apple revivió y se abrió paso en las casas, manos y billeteras de todos, se convirtió en una compañía que siempre cumplía y excedía las expectativas. Se convirtió en una compañía con los recursos para hacer prácticamente cualquier cosa, con más efectivo disponible que el gobierno de EE.

(how-to)

¿Por qué mi velocidad de descarga es más lenta que la de Internet que pago?

¿Por qué mi velocidad de descarga es más lenta que la de Internet que pago?

Su ISP anuncia una conexión de 40 megabits por segundo, pero eso no se parece a la velocidad de descarga que ve cuando Está agarrando un archivo grande. ¿Cual es el trato? ¿No estás obteniendo todo el ancho de banda que estás pagando? Estimado How-To Geek, El paquete que tengo a través de mi ISP local es para una conexión de 40Mb (esa es la redacción que usan).

(how-to)