Сына мужа в семью пускать не хочу

Можете меня осуждать и, наверное, это будет правильно.
У меня есть дочка, ей 1.6.
Я сейчас вышла замуж, живём с мужем душа в душу, он любит малышку, как свою, она его папой считает)
Но вот проблема...
У него есть жена бывшая и сын, ему 2.8. С женой он не общается, она от него гуляла.
Сын не нужен особо ни ей, ни ему. Я играю с малым, время провожу, но...я его терпеть не могу. Он маленькая обуза в нашей семье. (Живёт он у мамаши, но на выходные его забирают родители моего мужа) Муж об этом знает, я ему говорила. Сам мальчик называет меня мамой, меня это раздражает.
Я не люблю его и не собираюсь. Он же мне никто.
Сами мы переезжаем от его родителей на другую квартиру. Я не собираюсь малого брать от мамаши. +Она ещё и на алименты подала, хотя содержит сына мой муж и его родители.
Я не хочу влезать в их разборки по делёжке ребёнка, но и в нашу семью я его пускать не хочу. Муж не требует любви к мальчику.
Ситуация странная...спасибо, что дали высказаться, и за комментарии с советами спасибо)