Дочка игнорирует отчима

Дочка (4 года) и отчим быстро поладили. Мы год живем вместе, все довольны, сейчас ждем второго малыша. Но дочка иногда игнорирует отчима: что-то рассказывает только мне и говорит ему – «я маме вообще-то говорю», отдергивает руку, когда он хочет взять ее на прогулке… Какой-то видимой причины – нет. Муж расстраивается сильно по этому поводу и обижается на нее. Я стараюсь разрешить ситуацию путем «дружеского шушуканья» с дочкой. Мы решаем проблму. Все дружат и любят друг друга. Но муж упорно считает, что в такие моменты я встаю на сторону дочки. Я не мог быть между ними и соблюдать нейтралитет, но люблю обоих. Как избежать такого игнора со стороны ребенка и минимизировать обидчивое поведение мужчины?

Заранее благодарю.