去年結婚しました。当初主人は既婚者でしたが、前妻とは離婚しました。主人には二歳の子供がいます。

最近主人が離婚を匂わせてきます。子供の成長をそばで見たいなどです。一度は子供を引き取り育てる事も提案しましたが前妻に断わられました。
しかし主人は前妻にも未練があるようです。子供との面会は月一度、前妻も一緒なのでその日は苦痛です。
前妻はたぶん主人との復縁を望んでます。それは絶対に嫌です。
早く私達の間に子供が出来ればと思うけど、エッチの回数が減ってます。正直、前妻とその子供が憎いです。
前妻は主人に当たってばかりで、子供にも当たることがあったそうです。その時に主人の愚痴を聞いていたのが私です。
そんな女とやり直しても上手くいくとは思えません。
私は子供も大好きだし子供に当たるようなことは絶対ないです。
主人のことも大好きで尽くしています。主人と離婚しないためにはどうすればいいでしょうか？