女,21岁,我18岁遇见我现在的男朋友，在一起三年了，他比我大21岁，刚开始他给我说他已经离婚了，只是为了小孩(15岁)一直没离开那个家，我本身也是单亲家庭长大的出于自己小时候的经历的事情我也没有怎么反对他继续在那个家里，后来我们感情越来越好他搬出来和我一起住了，但是我总觉得他有两个家的感觉，有一次他睡着了我还看见他前妻给她发的挽留短信，我想问他为什么会这样，我男朋友居然对我吼，前段时间他小孩生病住院一直是他一个人照顾，（小孩判给她前妻的）他前妻一次医院也没去过，越让我觉得我就是个多余的他们三个才是一家人，我该怎么办？