창틀곰팡이 없애는법좀알려주세요

겨울이되니 창틀에 곰팡이가 많이피네요. 이것을 깔끔하게 지울수 있는 방법이 있을까요?

약품 뿌리는것밖에 답이 없을까요?궁금합니다