ブラウザー不要！wgetコマンドでWebサイトをPCにダウンロードする方法

Webブラウザーを使わずにWebサイトをダウンロードできる方法があるとご存知でしたか？Linuxコマンドラインの力を借りれば、それは十分可能です。実現する手段はいくつかありますが、本記事では「wget」コマンドに焦点を当てて詳しく解説します。

wgetとは？

wgetは、Webサーバーからコンテンツを取得するためのGNUのコマンドラインユーティリティです。ダウンローダーとして単体でも非常に強力で、HTTP、HTTPS、FTPなど複数のプロトコルに対応しています。さらにwgetには、以下のような特徴もあります。

• サイレントモードやバックグラウンドでの実行が可能
• LinuxのシェルスクリプトやCRONジョブとの連携が容易
• 複数のダウンロードを同時に実行できる
• パスワードが必要なファイルもダウンロード可能

なぜwgetを選ぶのか？

Webサイト関連の操作ができるツールは数多く存在しますが、wgetは幅広い用途に対応している点が魅力です。Webブラウザーがなくても、以下のようなことが実現できます。

• サイト全体の完全なコピーをダウンロード
• サイトから特定のファイルのみをダウンロード
• ファイル取得の自動化（オンデマンド実行）
• 認証が必要なポータルからドキュメントを取得

また、wgetは多くのLinuxディストリビューションに標準搭載されているため、追加インストールの手間なくすぐに使い始められるのも大きな利点です。

wgetの基本的な使い方

wgetの導入はとても簡単です。まずはLinuxターミナルを開きましょう。

ターミナルが起動したら、以下のようにwgetを実行します。

wget URL

「URL」の部分を、ダウンロードしたいサイトの正確なURLに置き換えてください。

途中までダウンロードしたファイルの続きから再開（レジューム）したい場合は、-cオプションを付けます。

wget -c URL

ログ出力を抑えてサイレントに実行したい場合は、-qオプションを追加します。

wget -q URL

オプションの使い方に迷ったら、次のコマンドでヘルプを確認できます。

wget --help

Webサイト以外にも、個別のファイルをダウンロードすることもできます。たとえば次のように実行します。

wget https://example.com/file.zip

これだけでファイルを取得し、カレントディレクトリに保存されます。

保存先のファイル名や場所を変更したい場合は、-Oフラグを使用します。

wget https://example.com/file.zip -O ~/Documents/my_downloaded_file.zip

FTP接続のためのオプション

先述のとおり、wgetはFTPにも対応しています。FTPサイトをそのまま指定して実行すると：

wget ftp://ftp.example.com

wgetは匿名（anonymous）ログインを試みます。ユーザー名やパスワードなどを手動で指定したい場合は、以下のフラグを使いましょう。

• --ftp-user=USER：ログイン用のユーザー名を指定
• --ftp-password=PASS：パスワードを指定
• --no-passive-ftp：パッシブモード転送を無効化

タイムアウト・リトライ・ダウンロード失敗への対処

最後に、サーバー接続の問題やタイムアウトに関連するオプションを紹介します。すべての障害に対処できるわけではありませんが、以下のフラグはサーバー側の問題への対応に役立ちます。

• --tries=NUMBER：ダウンロードの再試行回数を指定
• --retry-connrefused：サーバーに接続を拒否された場合でも再試行する
• --timeout=SECONDS：グローバル設定 ― タイムアウトまでの待機時間
• --wait=SECONDS：ダウンロード成功後の次回実行までの待機時間（繰り返し実行時）

wgetはどんな人におすすめ？

ここまで読んで「ブラウザーを使うより難しそう」と感じた方もいるかもしれません。しかし、システム管理者でもプログラマーでも、誰にとってもwgetが活躍する場面は必ずあります。ここでは、筆者が日常業務で実際に活用している2つの例を紹介します。

1つ目は、セキュリティ研究者としての使い方です。このコマンドをスケジュール実行すれば、複数のWebサイトを一度にダウンロードできます。テキストエディターで対象のURLを1行に1つずつ記述したテキストファイルを作成し、以下のように-iオプションを付けて実行すると、リスト内の各サイトを順番に自動ダウンロードしてくれます。

wget -i download_file_name URL

2つ目は、システム管理者としての使い方です。パスワードで保護された場所からドキュメントを簡単に取得できます。オフライン作業そのものに直接役立つわけではありませんが、wgetを使えばサイトに認証情報を渡してアクセスすることが可能です。

wget --user=user_id --password=user_password URL

以上がwgetの基本です！思っていたより難しくなかったのではないでしょうか。wgetで操作を自動化できれば、時間の節約になるだけでなく、オフライン環境での作業も可能になります。試さない手はありません。

この記事がお役に立てたかどうか、ぜひコメント欄でお知らせください。