为什么总有人背着我爱别人？

最近发现我对象好像偷偷跟别人暧昧，心里特别不是滋味。我们在一起挺久了，平时感情也还行，但最近他总躲着我看手机，还经常晚归，问他就说是加班。我试着翻过他微信，但聊天记录删得干干净净，什么都没找到。我也直接问过几次，他要么发火说我多疑，要么就敷衍过去。我现在特别困惑，是不是我哪里做得不够好，才让他总想着别人？还是说有些人天生就喜欢这种偷偷摸摸的感觉？希望有类似经历的朋友或者懂心理学的老师能帮我分析一下，这种情况到底是因为我太敏感了，还是对方真的有问题？我到底该不该继续信任他，还是该果断止损？