Los dos infinitivos son válidos. Empujar es ‘hacer fuerza contra alguien o algo para moverlo, sostenerlo o rechazarlo’: «No me empujes, mis pasos son lentos pero seguros». Suele usarse también con el sentido de ‘hacer algo para que una persona salga del puesto o empleo en que se halla’.