Inicialmente fue conocido con el nombre de Hyaty, que viene del guaraní Y'haty y significa "donde confluyen las aguas".
En 1957, el Poder Ejecutivo decretó el cambio de su denominación a Félix Pérez Cardozo, en honor al célebre arpista paraguayo nacido en este lugar.
Es regado por el río Tebicuarymí, y por su afluente el arroyo Mitay, en sus suelos existen algunos esteros.
El río Tebicuarymí, que bordea gran parte del área de Félix Pérez, es apto para la pesca.
Este distrito, es uno los que cuentan con artesanías en ao po'i y en arte indígena.