我跟别人有了孩子 老公不让我打掉

直接说主题;事情是这样的，本人85年的，结婚1年多了。工作稳定，和老公的收入也还不错，打算要个宝宝。
可老公那方面不是很好，结婚的时候我们是每周一次，后来发展到现在是一个月一次了，准备了很久，都没怀上宝宝。后来公婆就提议我们去医院检查，检查出来以后，我的一切正常，是老公的问题。后来在我的追问下，婆婆说，小时候老公那里做过一次手术，当时医生就说了，可能会影响到生育。
从这事情以后我们的感情大不如从前，而且公婆一家，要让我告诉别人是我不会生，不能说是老公不会生，我想男人的爱面子，虽说心里不愿意，还是答应了。
后来我们因为看医生吃药的事情天天吵架，我和老公结婚以前感情都挺好的，我就忍他，不和他吵，而且医生说遇到这样的事情，他脾气肯定大。慢慢的又大半年过去了，我们已经接受没有孩子，还打算领养一个。
老公单位要他出差，要3个月回来。他走后觉的一个家冷冷清清的，同学组织聚会，我想一个人也没什么事情周末，就去了。却遇到他，大学初恋男友，我们当时在一起3年多分手了，毕业后我们就在没见过面。他告诉我他还是单身。