关于三方协议违约金？

我在今年二月与外地公司签订三方协议，试用期三个月，三方协议规定2月20日前报到，违约金4000元，实际于2月16日报到。现今因为已经工作了三个月，所以想离职回去，但在向人事部门提交离职意愿时，对方以违反三方协议为由要求我赔偿4000元违约金。本人在公司的三个月内没有参加过公司组织的任何培训（除安全培训外），所有学习到的知识与技能均为自学。同时对方说三方协议终止的唯一途径是在我毕业后签订劳动合同后自行终止，请问对方向我提出的违约条款成立吗？