알바를 그만뒀는데 사장이 다시 나와서 일하라고 하고 싫다고 하니 협박하는데 어떻게 할까요?

알바를 몇년간 하다가 5개월전에 사장한테 말해서 알바생을 뽑으라고 얘기하고 그만뒀다. 그때는 사장이 그래하면서 이해를 해줘서 홀가분했는데 그후 6개월 뒤에 거래처 담당자가 사장한테 일감을 의뢰했고 사장은 거래처 담당자에게 그만둔 저의 핸드폰 번호를 알려주며 저와 일진행 하라고 얘기했고 거래처 담당자는 저에게 전화를 했으며 제가 전화를 안받자 카톡문자를 해서 연락달라고 메세지를 남겼습니다. 그리고 10분뒤 제가 사장에게 전화해서 저와 상관없는 거래처 담당자가 왜 전화하냐고 물으니 자기가 일부러 그랬다고 얘기하고 사람 못구해 저보고 다시 와서 일하라고 해서 거절했는데 사장이 예전에 제가 업무실수에 대해 손해가 크고 알바 채용못해서 피해가 있다며 니가 나한테 그렇게 했으니 책임져라 가만 안둔다고 하면서 협박을 하는데 근로법에 어떠한 책임이 있는지와 사장의 협박은 어떤 법적인 부분이 있나요? 저는 사람뽑는데 5개월이라는 시간을 충분히 줬습니다. 제가 대처를 어떻게 해야 되나요? 궁금합니다.