커피 못마시는 사람은 커피우유도 못 마실까요?

커피만 마시면 몸에서 이상 반응 같은게 나서 안마시는데 주위 사람들이 다 커피를 마시니까 저도 너무 먹고 싶은데 커피우유 먹어도 별차이 없을까요?