https://～/page?code=01
https://～/page?code=02
https://～/page?code=03
上記のような「code=」に入ってくる数字により、動的にHTMLの表示内容が変わるWebページの、表示されるHTMLファイルを複数一括で取得する方法をまとめました。
ダウンロード方法/手順
以下コマンド実行により、指定URLページをダウンロード可能です。
curl (ダウンロードしたいURL) > (出力ファイル名)
例）
curl https://～/page?code=01 > code01.html
curl https://～/page?code=02 > code02.html
curl https://～/page?code=03 > code03.html
上記コマンドはテキストベースのため、エクセルやGoogleスプレッドの自動入力を利用して、数字の部分を連番にして複数生成することも可能です。
コマンド実行はWindowsのコマンドプロンプトに上記コマンドをそのまま貼り付けて実行するか、複数ある場合は、テキストに上記コマンドを貼り付け、テキストファイルの拡張子を.txtから.batに変更し、.batファイルをダブルクリックで全てのコマンドを一度に実行できます。
コメント