可以不去，但是要礼貌的回绝，绝对不要吊着单位，或者是不回复，因为其实工作后你会发现这个圈子非常小，关系网是非常复杂的，你的一次不好的表现可能会为你以后埋下隐患，所以最好不要做损人不利己的事情。