Aunque se la pasan bromeando, el actor reconoció que no encuentra mucha empatía con algunos de su equipo