축구경기에서 퇴장당한 선수는 그대로 퇴근하는 건가요?

축구경기를 보면 거친 파울을 하거나 욕설을 하는 등의 행위가 발생하면 그 선수에게 심판이 퇴장명령을 내리잖아요. 그럼 퇴장당한 선수는 곧바로 퇴근해도 되는건가요?