HsbtDiary

■ aria2c で cookies を使ってダウンロードをする

社内に存在する認証が必要な Web サイトからデータをスクレイプする必要があったので、なんか楽にできないかと探していたら aria2c で cookies を使って認証を抜けるのが楽らしいということでやってみた。

aria2c --load-cookies=/Users/xxx/Library/Application\ Support/Firefox/Profiles/yyy.default/cookies.sqlite /path/to/location

でシュッといけるっぽいので、上記をそのまま ar2 とかに alias してしまって、必要な時は firefox でログインしてから URL を渡してダウンロードすることにした。便利。