我老公比较外向，在单位里很健谈，跟同部门的一个女同事特别聊得来，有时也一起加班到很晚。我很介意，但是我知道他不会出轨。可是我现在不上班，在家天天跑医院做试管治疗，现在已经到后期准备取卵。但是我这种整天担心的心态我担心会影响要宝宝。我很想转变心态，但是有时就是很担心老公跟别的女人会走得太近。我该怎么办？