你这边无法设置。

因为微信就是这么设定的。

如果一个人有了你的微信号，他（她）那边可以无需你的同意就擅自把你拉进那个群里。

但是如果是用给你发群名片的方式拉你进群，你可以置之不理，或者干脆直接把这条消息删掉，这样就进不了这个群了。