임대료 세금계산서를 받지 않은 경우

당초 계약할때 세금계산서를 발행하지 않는 조건으로 임대차계약을했는데 제가 소득세 신고할때 비용으로 신고하면 어떤문제가 있을까요?