대답 바로 안하는게 그렇게 잘못된건가요?

남자친구와 자주 싸우는 이유중에 하나가
제가 대답을 바로바로 안하는겁니다.
남자친구는 이걸 되게 싫어하는데
제 입장을 말하자면 멍때리거나 다른생각하고있다가
못할때도 있고 무의식중에 대답안하고
행동으로 하는경우도 있어요.
대부분은 뭐라고 대답해야할지 모르겠어서
뭐라고 대답해야하나 생각할때가 많은것 같아요.
물론 짜증나서 대답하기 싫을때도 있지만
평소에는 저런이유인데...
뭐라고 대답해야할지 생각하느라 대답이 바로 안나올때도 있다 얘기하면 핑계대지말라네요...
에휴.. 너무싫어해서 고쳐주고 싶은데 무의식중에 저도 바로 잘 안고쳐지는거 같아요ㅠㅠ
제가 그렇게 잘못된걸까요...ㅠㅠ