Unixから大量ファイルを一括ダウンロードしたい



◇-?Unixから大量ファイルを一括ダウンロードしたい-きくち-06/23-20:15(96)-No.355030
 ┗?!Re:Unixから大量ファイルを一括・..-ZONE-06/23-23:38(93)-No.355064
  ┗?!-Re:Unixから大量ファイルを一括...-きくち-06/26-11:10(33)-No.355542

▲このページのトップに戻る
355030Unixから大量ファイルを一括ダウンロードしたいきくち 2006/06/23-20:15

メーカー名: IBM
OS名: Aix
パソコン名:RS/6000
ソフト関連:途中で止まる
--
●目的
Unixサーバから、大量ファイルを一括でダウンロードしたい

●現状
途中で中断されてしまう。
原因はUnix側の負荷が高いためと推測。
ディレクトリの圧縮を試みたがうまくいかない。

●質問
1.サーバの負荷を軽減するにはどうしたらよいでしょうか。
2.ディレクトリを、中のファイルごと圧縮し、ダウンロードするには
どうしたらよいでしょうか。
3.一括ダウンロードする、なにか良い方法はございませんでしょうか。

**************
以下詳細
**************
Unixサーバから、クライアントPCにデータをダウンロードする際、
大量のファイルを一括で転送しようとすると、下記のエラーが発生し、
途中で中断してしまいます。

「451 Local resource failure: malloc: Not enough space」

普段はFFFTPを使用していますが、コマンドプロンプトでftpコマンドを
用いてダウンロードしても、同じ結果でした。

サーバー側の負荷が原因ではないかとのアドバイスをいただいたので、
Unixの状態をいろいろ調べてみました。
結果は下記の通りです。

【df -k】
Filesystem 1024-blocks Free %Used Iused %Iused Mounted on
/dev/hd4 5013504 1751404 66% 105430 22% /
/dev/hd2 5128192 1945128 63% 61039 13% /usr
/dev/hd9var 16384 8504 49% 447 19% /var
/dev/hd3 32768 28500 14% 291 5% /tmp
/dev/hd1 16384 16000 3% 10 1% /home
/proc - - - - - /proc
/dev/hd10opt 98304 24512 76% 562 10% /opt

【du -s】
13339312

【ps aux】
USER PID %CPU %MEM SZ RSS TTY STAT STIME TIME COMMAND
root 16388 62.0 6.0 40 21516 - A Jun 22 1083:50 wait
root 426118 37.1 9.0 31660 31684 - A Jun 22 640:24 java -Xms256m
-X
root 131202 1.1 1.0 3352 3384 - A Jun 22 19:59 dtgreet
root 57358 0.1 6.0 116 21592 - A Jun 22 1:08 gil
(以下、%CPC・0が数十件)


データの容量を減らそうと、ディレクトリの圧縮を試みましたが、結果は下記の
通りです。

【tar -cvf SRC.tar SRC】
SRC.tarというファイルはできるが、圧縮が成功したデータはSRCディレクトリ内の
1件のみ

【zip SRC.zip SRC/lha SRC.lzh SRC】
zip : 見つかりません
lzh : 見つかりません

【gzip -c SRC】
gzip: SRC is a directory -- ignored


データを一括ダウンロードする、なにか良い方法はございませんでしょうか。
ご指南、よろしくお願いいたします。


**********************************************************************
●当環境
Unixサーバ
メーカー IBM
型番   RS/6000
OS Aix
空き容量 1.75GB

ローカルPC
メーカー DELL
型番   INSPIRON/1300
OS WindowsXP
空き容量 25GB

FFFTP Var1.92a

▲このページのトップに戻る
355064Re:Unixから大量ファイルを一括ダウンロードしたいZONE 2006/06/23-23:38

記事番号355030へのコメント
>「451 Local resource failure: malloc: Not enough space」

FFFTPは使ったことないですが、mallocでの作業領域(メモリ)確保に失敗しています。
メモリ不足かメモリにエラーが無いか確認してください。

▲このページのトップに戻る
355542Re:Unixから大量ファイルを一括ダウンロードしたいきくち 2006/06/26-11:10

記事番号355064へのコメント
ZONEさんは No.355064「Re:Unixから大量ファイルを一括ダウンロードしたい」で書きました。

ご指南ありがとうございます。

しかし、「mallocでの作業領域」というのがよくわかりません。
私は、ITに関して専門的知識はおろか、基礎知識もほとんどありません。
情報収集はすべてネットで行っています。
引き続き「malloc」や「作業領域」に関して情報収集を行ってみますが、
もしよろしければ、

1.メモリ状況を調べる方法
2.正常・異常状況判断の基準
3.メモリを増やす、あるいはエラーを修正・回避する方法

などをご教授いただけますでしょうか。

知識不足で申し訳ありませんが、よろしくお願いいたします。

A1.本ページは参考になりましたか? 又はアドバイスがありますか?
解決 参考になった 参考にならなかった アドバイスする

A2.何度目の訪問ですか?
初めて来た   数度目(2〜4) 5回以上来ている   管理人:

A3.何か一言どうぞ(アドレスは書くことができません)

A4.アドレスがあればどうぞ(1つまで)


↑↑↑↑よろしければ押してください↑↑↑↑

何か一言(本ページで参考になったならないを含めて残してあります)
◎:解決 ○:参考になった ×:参考にならなかった !:アドバイスあり

参考回数投稿日時何か一言