Il gruppo Server Admin ha evidentemente il permesso che hai citato (b_client_ignore_bans), bene, rimuovilo.
Attento che poi potresti essere bannato anche tu.