fess を停止後、インストールしたディレクトリを削除することでアンインストールすることができます。
$ rm -r fess-<version>
fess を停止後、RPMまたはDEBパッケージをアンインストールしてください。