以前在大学和刚毕业4年内有手淫史，16年开始戒色，17年底结婚的，结婚前太着急没有注意对方性格，觉得差不多就可以了，但结婚后发现对方内心阴险，从不主动联系我，觉得她是个隐患，想离婚但有会有损失，很纠结。难道有手淫史的人婚姻都不幸福吗？