왜 제사는 저녁 늦게 지내는 걸까요?

저희 집은 결혼 전에는 제사를 지내지 않는 집이라 몰랐는데 결혼한 배우자의 집에서는 제사를 항상 밤 늦게 지내더라고요. 이건 왜 그런 걸까요?