Parce que c'est de vous dont il se sent le plus proche tout simplement. Il ne faut pas forcer.
Je suis aussi le plus "strict/sévère" avec mon chien pourtant c'est moi qu'il suit dans chaque pièce, qu'il écoute le plus dehors et avec qui il veut être en permanence.
Concernant ton conjoint, peut être que ton chien le craint un peu. Ce que je conseil, et qui devrait être pratiqué tout le temps, c'est de ne pas exciter le chien au moment de sortir.
- C'est à dire, pas de "Ouiiii mon bébé, prêt pour la sortiiiie", etc... Le sortir sans laisse de la maison et lui mettre seulement une fois dehors. Il peut aussi l'attirer avec une friandise en restant au niveau de la porte d'entrée (la porte doit être ouverte) pour qu'il associe le fait de sortir à un bon moment.
Sinon, vous pouvez aussi poser la question à un comportementaliste.