Periodo vacacional y custodia

En periodo vacacional no se ha cumplido a semanas como tenemos puesto porque el Padre de mi hijo esta toda la semana fuera y nose puede quedar con el. Esta semana se ha cabreado y se ha llevado a mi hijo diciendo que se va a hacer por semanas. Pero el no esta en toda la semana y mi hijo se tiene que quedar con la pareja del Padre. Tiene derecho a tenerlo otra persona si el Padre no esta??? Mi hijo tiene 4 años y se que lo esta pasando mal sin estar conmigo.