身体缺陷导致心理防御

有一个喜欢自己的人,对我特别好,我也了解他,但是觉得自己身体有病,就是一个缺陷的人,所以拒绝了他。其实自己内心很痛苦,舍不得,已经习惯他了。怎么办,他一直以为我对他就是没有感觉得,他自作多情了。我害怕告诉他,因为我不相信有人可以接受残缺的自己。