wget

下の階層も全部取る

wget -r -l [階層数？10とか] [url]
で全部とる

Basic認証がかかったページのファイルをwgetする

wget --http-user=ユーザ名 --http-passwd=パスワード http://pass/to/dir/

Windowsから使う

http://gnuwin32.sourceforge.net/packages/wget.htm