拒绝别人的好意算不算一种伤害？

其实我倒是不在意是不是会给对方带来伤害，但是我妈一直在说我，说对别人是伤害，所以我就不懂了，拒绝别人的帮助也是伤害吗？事情是这样的，我陪我妈去继父的亲戚家走亲戚，因为我怀了二胎，所以妈妈不让我抱我老大，她把孩子交给我妹了。然后继父家有一人就在陪我们出去的时候，老抱着她，还亲她，我不太愿意，就想抱回来，我找了各种婉转的理由，我妈就在旁边拦着，他也不撒手，弄的我很无奈。总不能把孩子抢过来吧。