yum-downloadonlyのインストール
# yum install yum-downloadonly
保存したいパッケージのダウンロード
# yum install --downloadonly パッケージ名
以上で、/etc/yum.conf の cachedir(初期値は/var/cache/yum)にダウンロードされる。
実際は、/var/cache/yum/base/packages配下に保存されていた。
なお、保存されたパッケージはyum clean allを実行すれば削除される。
参考：http://ziddy.japan.zdnet.com/qa4752438.html