現在,マッチする Rule が定義されないコンテンツを処理するときに
"No rule for (http://foo.bar.com/image/a.jpg, image/jpeg)"
のようなログが WARN レベルで出力されます.
これを,INFO か DEBUG レベルのログにしていただけないでしょうか.
アプリケーションで意図的に処理をしないようにしている(HTMLのみ処理するとか)場合にも
このログが大量に出力され,ログが見にくくなってしまいます.
警告になっているのは,dicon の設定ミス等を考慮されてのことかもしれませんが,
UrlFilter で厳密に取り除くのが大変なためクロールはしてしまうが特に処理は必要ない,
というケースでわざと Rule を定義しないというのはありがちなケースではないかと思います.
対応を検討していただけると助かります.