¿Puedo llevarme de vacaciones a mi bebé, sin consentimiento de su padre?

Soy madre soltera, mi hijo tiene 9 meses y quiero irme de vacaciones con él. Pero su padre me amenazó con hacerme una denuncia en el juzgado porque no quiere. Pero mi bebé tiene mi apellido ya que aun no hemos tramitado nada. Todo lo que acordamos ya sea, mantención y visitas es por palabras y arreglos entre nosotros.

Sólo son, como máximo, 3 semanas de vacaciones, y a otra provincia. ¿Él tiene derecho a negarme eso? Son sólo vacaciones. Y prácticamente sus visitas se resumen en 2 veces a la semana que duran como mucho 15 min cada visita, porque él así lo quiere, yo no le impongo nada.

Necesito saber si puedo viajar tranquila o si requiero de algún papel ante la justicia para hacerlo. Desde ya gracias.