삼국시대에 제주도는 어느나라가 관리했었나요?

안녕하세요. 과거 삼국시대에도 배가 있었던걸로 알고 있는데 과거에 제주도라는 섬은 어느 나라의 영토에 들어갔었나요? 고구려는 아닌것같도 신라나 백제중에 있었을까요?