请教关于劳动合同的问题

nofleanofly

请教大家一个问题。

我在11月份请了圣诞的年假3个礼拜，从12月21号到1月12号。
然后我在12月初找到了新工作，12月2号我向现在的公司提出辞职。合同上我的notice period是4个礼拜。所以我最后一天上班是12月20号。也就是我notice period包括了3个礼拜上班+1个礼拜holiday。

在我辞职的时候老板没说什么。然后过了2个礼拜的今天他和我说我1月12号年假完了要回去再上1个礼拜班。因为我notice period里包括1个礼拜的假期。说如果他知道我要辞职之前就不会批我的假。

我想问下大家从法律角度来说我需要再回去吗？

谢谢了