Пропала любовь к ребенку?

Здравствуйте! Моему сыну 4 года, я всегда его очень любила, старалась хорошо воспитывать, в любви и понимании. Рукоприкладство у нас запрещено, только разъяснение и иногда повышение голоса.
Иногда бабушка с дедом забирают его почти на сутки по выходным...У нас с ними чуть напряжённые отношения из-за того, что они не слушают просьб (уже указаний) которые касаются здоровья сына (по рекомендауии доктора ему нельзя все, что с сахаром в составе из-за больных зубов).
Недавно они взяли свна почти на 3 дня и после этого он не хотел идти домой. Прям кричал, что не хочет к маме (к папе такого не было). Меня это очень сильно расстроило, но я понимаю, что это из-за сладостей которые свекры ему дают, а я запрещаю (но у на дома всегда есть альтернатива с сахарозаменителем). Возможно что свекровь ему что-то наговорила обо мне...она женщина с фантазией и любитель выдумок.
Сын еще дня 2 говор л, что хочет жить с бабушкой, а с мамой ему плохо.
Я все понимаю и стараюсь игнорировать свекровь, а с сыном разговариваю без обид, стараюсь узнать в чем дело. Но проблема в том, что у меня после этого будто бы пропала любовь к сыну. Вот прям оборвалось это трепетное чувство(
Подскажите, пожалуйста, как быть, как наладить отношения с ребенком. Мне кажется, что лучше временно не отвозить его к бабушке, но поможет ли это в отношении моих чувств?
Благодарю