外卖送错还不赔钱

家人们，外卖送错到别人那里了，外卖员要帮我找回来，可是送到别人手里再给我我不放心，就不想要了，要他退我钱有问题么？我的地址也没填错，是他送错了，还道德绑架我说他跑单赚不了多少钱不能赔给我，我也没再找他要钱，我打不过一个大男的，也不敢投诉