【PowerShell】Invoke-WebRequestを使ってWebサイトのリンクを取得する方法

PowerShellを使ってWebサイト上に存在するリンクを取得するには、まずInvoke-WebRequestコマンドレットで対象のWebページからデータを取得します。

$req = Invoke-WebRequest -uri "https://theautomationcode.com"
$req

実行結果

コマンドを実行すると、Webページ全体のレスポンスが変数 $req に格納されます。このレスポンスオブジェクトには、HTMLコンテンツやステータスコード、リンク情報などさまざまなプロパティが含まれています。

Linksプロパティでリンク情報を取得する

ページ内のリンクだけを取り出したい場合は、Links プロパティを利用します。このプロパティには、InnerHTML・InnerText・outerHTML・tagName・href などのサブプロパティが含まれており、各アンカー要素（<a>タグ）の詳細な情報を確認できます。

$req = Invoke-WebRequest -uri "https://theautomationcode.com"
$req.Links

実行結果

innerHTML : Scripts
innerText : Scripts
outerHTML : <A href="https://theautomationcode.com/scripts/">Scripts</A>
outerText : Scripts
tagName   : A
href      : https://theautomationcode.com/scripts/

hrefプロパティでURLのみを抽出する

実際に必要となるのはリンク先のURLだけです。その場合は、Select-Object -ExpandProperty を使って href プロパティの値のみを展開して取得すると便利です（Select は Select-Object のエイリアスです）。

$req.Links | Select-Object -ExpandProperty href

実行結果

https://theautomationcode.com/2020/11/
https://theautomationcode.com/author/chiragce17/
https://theautomationcode.com/category/powershell/
https://theautomationcode.com/category/troubleshooting/

このように、Invoke-WebRequestとLinksプロパティを組み合わせることで、Webサイト内の全リンクを簡単に一覧化できます。サイトマップの作成やリンク切れチェックなど、Web管理業務の自動化にも活用できるテクニックなので、ぜひ覚えておきましょう。