Ceder patria potestad a uno de mis hermanos

Mi hijo tiene 8 años y yo 26. La vida que llevamos no es la mejor, la pasamos peleando y ofendiéndonos. Yo no puedo más con él. He pensado ceder patria potestad a uno de mis hermanos mayores. Él siempre me la ha pedido, ya que era una niña cuando lo tuve.

El problema es que él papá del niño no quiere firmar y ceder, él no me pasa pensión ni nada. ¿Qué puedo hacer con esta situación? ¿Qué procedimiento debo seguir? Porque el dejarlo con su papá no es la mejor opción pues él ni oficio ni beneficio, creo que sólo es por molestar, la verdad es que él ni pela al niño ni nada por el estilo.