no te recomiendo para nada que lo desistales o que no lo uses es uno de los mejores metodos de seguridad.
No obstante indicarte que lo puedes desactivar simplemente haciendole el fail2ban stop y poniendolo para que ene l arranque no se inicie asi no perderas la pestaƱa seguridad