フォーラム: 【移行しました】サポート (スレッド #37883)

MaxLengthExceededExceptionでクロールが失敗すると、/tmpにダウンロードしたファイルが残り続ける (2016-07-13 15:35 by shibasr #78336)

初めまして。Fess 10.1.1を利用しております。

ウェブクロールにて、クロールしたファイルのサイズ上限に引っかかり、
MaxLengthExceededExceptionの例外が発生すると、
/tmpディレクトリにcrawler-HcHttpClient-<数字列>.out という名前で、
クロール対象のURLからダウンロードしたと思われるファイルが残り、
サーバのHDD領域を圧迫しております。

これらのファイルがFessにとって不要になったならば、
削除したいのですが、何か判断する方法はありますでしょうか。

また、Fessの機能として、不要になったファイルを削除することは可能でしょうか。

メッセージ #78336 への返信×

Wiki文法は使えません
ログインしていません。投稿を区別するために投稿者のニックネームをつけてください(ニックネームの一意性は保証されません。全く別の人も同じ名前を利用することが可能ですので本人であることの特定には利用できません。本人であることを保証したい場合にはログインして投稿を行なってください)。 ログインする

Re: MaxLengthExceededExceptionでクロールが失敗すると、/tmpにダウンロードしたファイルが残り続ける (2016-07-14 17:03 by shinsuke #78343)

その問題を再現できないのですが、logs/fess-crawler.logなどに
何かERROR等発生していますでしょうか?
#78336 への返信

メッセージ #78343 への返信×

Wiki文法は使えません
ログインしていません。投稿を区別するために投稿者のニックネームをつけてください(ニックネームの一意性は保証されません。全く別の人も同じ名前を利用することが可能ですので本人であることの特定には利用できません。本人であることを保証したい場合にはログインして投稿を行なってください)。 ログインする

Re: MaxLengthExceededExceptionでクロールが失敗すると、/tmpにダウンロードしたファイルが残り続ける (2016-07-14 17:24 by shinsuke #78344)

再現できました。
次のリリースで修正します。
#78343 への返信

メッセージ #78344 への返信×

Wiki文法は使えません
ログインしていません。投稿を区別するために投稿者のニックネームをつけてください(ニックネームの一意性は保証されません。全く別の人も同じ名前を利用することが可能ですので本人であることの特定には利用できません。本人であることを保証したい場合にはログインして投稿を行なってください)。 ログインする

Re: MaxLengthExceededExceptionでクロールが失敗すると、/tmpにダウンロードしたファイルが残り続ける (2016-07-27 09:38 by shibasr #78418)

[メッセージ #78344 への返信]
> 再現できました。
> 次のリリースで修正します。

修正いただきありがとうございます。

Fess 10.1.2にて、MaxLengthExceedExceptionでクロールが失敗した場合に、
/tmpにダウンロードしたファイルが削除されることを確認しました。
#78344 への返信

メッセージ #78418 への返信×

Wiki文法は使えません
ログインしていません。投稿を区別するために投稿者のニックネームをつけてください(ニックネームの一意性は保証されません。全く別の人も同じ名前を利用することが可能ですので本人であることの特定には利用できません。本人であることを保証したい場合にはログインして投稿を行なってください)。 ログインする