А ты все правильно делаешь. Просто спокойно (по возможности:)) стой на своем и иногда (когда хочешь) подходи к нему. Ему надо перестроиться, пусть у него будет такая возможность. Обычно дольше одного дня такая тема не длится. 
А самое прикольное, что совсем скоро он будет перестраиваться автоматически, просто по факту переезда от тебя к маме и обратно. Сейчас он еще тебя проверяет, будешь вестись или нет. Если будешь гнуть свою линию, он перестанет сомневаться и все встанет на место.