it.phhsnews.com


it.phhsnews.com / Come estrarre i collegamenti da qualsiasi pagina Web Utilizzando PowerShell

Come estrarre i collegamenti da qualsiasi pagina Web Utilizzando PowerShell


PowerShell 3 ha molte nuove funzionalità, incluse alcune potenti nuove funzionalità relative al web. Semplificano notevolmente l'automazione del Web e oggi mostreremo come estrarre ogni singolo link da una pagina Web e, se lo desideri, scaricare la risorsa.

Scraping The Web With PowerShell

Ce ne sono due nuovi cmdlet che rendono più semplice l'automazione del Web, Invoke-WebRequest, che semplifica l'analisi dei contenuti leggibili dall'uomo e Invoke-RestMethod che semplifica la lettura dei contenuti leggibili dalla macchina. Poiché i collegamenti fanno parte dell'HTML di una pagina, fanno parte delle cose leggibili dall'uomo. Tutto quello che devi fare per ottenere una pagina web è utilizzare Invoke-WebRequest e dargli un URL.

Invoke-WebRequest -Uri '//phhsnews.com'

Se scorri verso il basso vedrai che la risposta è una proprietà link, possiamo usare la nuova funzione di enumerazione dei membri di PowerShell 3 per filtrarli.

(Invoke-WebRequest -Uri '//phhsnews.com') .Links

Come puoi vedere ottieni molto di collegamenti indietro, questo è dove devi usare la tua immaginazione per trovare qualcosa di unico per filtrare i link che stai cercando. Supponiamo di volere un elenco di tutti gli articoli in prima pagina.

((Invoke-WebRequest -Uri '//phhsnews.com') .Links | Dove-Object {$ _. Href -like "http * "} | Dove classe -eq" titolo "). Titolo

Un'altra grande cosa che puoi fare con i nuovi cmdlet è automatizzare i download di tutti i giorni. Vediamo automaticamente come raschiare l'immagine del giorno dal sito di Nat Geo, per fare questo uniremo i nuovi cmdlet web con Start-BitsTransfer.

$ IOTD = ((Invoke-WebRequest -Uri ' // photography.nationalgeographic.com/photography/photo-of-the-day/').Links | Dove innerHTML -like "* Download Wallpaper *"). href
Start-BitsTransfer -Source $ IOTD -Destinazione C: IOTD

Questo è tutto ciò che c'è da fare. Hai qualche trucco per te? Fateci sapere nei commenti.


Che cos'è NoScript e dovresti usarlo per disabilitare JavaScript?

Che cos'è NoScript e dovresti usarlo per disabilitare JavaScript?

NoScript è stato considerato, da molti utenti di Firefox, un'estensione indispensabile, ed è ora disponibile per il nuovo Firefox Quantum. Ma cos'è NoScript, perché così tante persone ci giurano, e dovresti usarlo? NoScript è, in sostanza, un componente aggiuntivo di Firefox che disabilita le cose come JavaScript da eseguire sui siti web che visiti.

(how-to)

I migliori server DNS pubblici gratuiti

I migliori server DNS pubblici gratuiti

Stai cercando di passare dal tuo ISP DNS a un altro provider? Sono stato sorpreso di scoprire che l'utilizzo di un server DNS pubblico gratuito da una società rispettabile era di gran lunga migliore rispetto all'utilizzo del mio DNS ISP locale, soprattutto quando viaggiavo in paesi stranieri.

(How-to)