Que hacer cuando tienes un segundo esposo

Es muy triste pensar que hay tantas relaciones que se fracturan y que los unicos afectados son nuestros hijos, yo me divorcie hace seis meses pero desde hace 4 años ya no vivia con el, tuvimos una niña ahora ella tiene 10 años durante el tiempo de separacion el veia casi a diario a su hija y me insistia en regresar pero yo no acepte porque vivi violencia fisica a su lado, paso el tiempo y aproximadamente hace 1 año y medio tuve otra relación de la cual nació mi segundo hijo, incluso cuando estaba a punto de tener a mi bb me decia que me aceptaba asi cuando di a luz me entere de que ya vivia con otra persona en la casa que construimos juntos y ahora que ha pasado un año el ya no ve a su hija para nada no ha mostrado ningun interes en buscarla no se si no lo dejen o el ya no quiera a pesar de que ella tiene dos hijos de 8 y 3 yo no me preocupo tanto por eso ni la pongo de pretexto para buscarlo, lo que me tiene asi es que mi actual pareja era divorciado sin hijos pero a veces es medio torpe para platicar con mi hija me molesta porque siento que no tiene el tacto para acercarse a ella y obviamente nuestro hijo que ya tiene un año tiene la preferencia a mi me pone mal esta situacion porque no puedo entender xq? a mi ex no le cuesta ningun trabajo convivir con una señora con dos hijos que no son de él y a mi pareja hasta cierto grado siento que le molesta porque yo si le he dejado claro que yo no permito que le haga caras o gestos o en ocasiones ni le contesta a mi hija cuando le pregunta algo..... a lo que voy es que una mujer o un hombre con hijos siempre va a traer problemas????? a veces pienso que hubiera sido mejor quedarme con su papá disfrutando de esa casa que con mucho esfuerzo construimos y que con sus detalles y actos por parte de mi pareja hacia mi hija hacen que recuerde a su papá xq ella era su adoración y no logro entender xq ya no la busca, mi hija a veces se pone a llorar diciendome que lo extraña, pero pese a todo esto yo no lo he buscado para molestarlo o para fracturar su otra relacion se lo dejo a Dios y al tiempo solo que a veces me desespero y lloro de tristeza porque crei que iba a ser diferente mi vida en todos los aspectos pero me equivoque.....que puedo hacer????
.