老公懷疑孩子不是他的

我跟老公從婚前就是遠距離戀愛，我自認遠距離戀愛的基礎就是信任
會結婚是因為遠距離談了兩年，老公覺得想要趕快定下來，所以決定先結婚，再來想工作環境該怎麼改變
但婚後兩人還沒協調好該怎麼辦就懷孕了，目前已經懷孕4個月
老公持續在中國上班，大概三個月-半年返台一次..跟老公說我懷孕的時候他人也不在我身邊
昨天老公卻說這次回台灣想驗孩子DNA！因為長期不在我身邊他真的很沒安全感，開始懷疑覺得越想越覺得這孩子真的是他的嗎？
老實說聽到老公講這種話我已經覺得他沒資格當爸了，我們的感情也比我想像中的薄弱吧？
我說如果要驗DNA可以，但驗出來真的是你孩子要怎麼辦？
他說是就養不是就離婚啊！誰知道你有沒有偷人？
我只覺得他現在這種態度我已經想跟他離婚了....完全不相信我這樣的家庭還需要嗎