Bonjour,
Cela dépend de la formulation de votre contrat. Par principe, lorsque le lieu de travail est mentionné, cela n'a qu'une valeur informative, à moins que les parties aient entendu contractualisé le lieu de travail, c'est à dire en faire un élément essentiel du contrat.
Par ailleurs, si le changement de lieu de travail ne se déroule que sur une journée il faudrait savoir où se situe ce changement de lieu de travail par rapport à votre lieu habituel, quelles sont vos fonctions (déplacements inhérents ou non) ; mais votre employeur pourrait vous l'imposer arguant qu'il ne s'agit que d'un déplacement occasionnel.
Cordialement