it.phhsnews.com


it.phhsnews.com / Come estrarre i collegamenti da qualsiasi pagina Web Utilizzando PowerShell

Come estrarre i collegamenti da qualsiasi pagina Web Utilizzando PowerShell


PowerShell 3 ha molte nuove funzionalità, incluse alcune potenti nuove funzionalità relative al web. Semplificano notevolmente l'automazione del Web e oggi mostreremo come estrarre ogni singolo link da una pagina Web e, se lo desideri, scaricare la risorsa.

Scraping The Web With PowerShell

Ce ne sono due nuovi cmdlet che rendono più semplice l'automazione del Web, Invoke-WebRequest, che semplifica l'analisi dei contenuti leggibili dall'uomo e Invoke-RestMethod che semplifica la lettura dei contenuti leggibili dalla macchina. Poiché i collegamenti fanno parte dell'HTML di una pagina, fanno parte delle cose leggibili dall'uomo. Tutto quello che devi fare per ottenere una pagina web è utilizzare Invoke-WebRequest e dargli un URL.

Invoke-WebRequest -Uri '//phhsnews.com'

Se scorri verso il basso vedrai che la risposta è una proprietà link, possiamo usare la nuova funzione di enumerazione dei membri di PowerShell 3 per filtrarli.

(Invoke-WebRequest -Uri '//phhsnews.com') .Links

Come puoi vedere ottieni molto di collegamenti indietro, questo è dove devi usare la tua immaginazione per trovare qualcosa di unico per filtrare i link che stai cercando. Supponiamo di volere un elenco di tutti gli articoli in prima pagina.

((Invoke-WebRequest -Uri '//phhsnews.com') .Links | Dove-Object {$ _. Href -like "http * "} | Dove classe -eq" titolo "). Titolo

Un'altra grande cosa che puoi fare con i nuovi cmdlet è automatizzare i download di tutti i giorni. Vediamo automaticamente come raschiare l'immagine del giorno dal sito di Nat Geo, per fare questo uniremo i nuovi cmdlet web con Start-BitsTransfer.

$ IOTD = ((Invoke-WebRequest -Uri ' // photography.nationalgeographic.com/photography/photo-of-the-day/').Links | Dove innerHTML -like "* Download Wallpaper *"). href
Start-BitsTransfer -Source $ IOTD -Destinazione C: IOTD

Questo è tutto ciò che c'è da fare. Hai qualche trucco per te? Fateci sapere nei commenti.


Cosa prendere in considerazione prima di acquistare un'auto elettrica

Cosa prendere in considerazione prima di acquistare un'auto elettrica

Se hai prestato attenzione ai titoli di recente, potresti pensare che ora è meglio che mai abbandonare le auto a benzina a favore di tutto-elettrico. Ma molte persone che vogliono comprare un'auto elettrica spesso commettono l'errore di mettere il carrello ad energia solare davanti al cavallo. Quindi cosa dovresti sapere prima di fare il grande passo?

(how-to)

Come crittografare il DNS per una navigazione più sicura

Come crittografare il DNS per una navigazione più sicura

Da tempo dedichiamo i vantaggi dei server DNS di terze parti, ma un ulteriore vantaggio che potrebbe essere di interesse è il possibilità di crittografare tutte le tue richieste DNS, proteggendoti ulteriormente da chiunque ti spia nel mezzo. CORRELATO: 7 motivi per utilizzare un servizio DNS di terze parti DNSCrypt, dal grande team di OpenDNS , è la soluzione semplice che useremo per aggiungere la crittografia tra il tuo computer e il server DNS.

(how-to)