没有交代，应该没有事

哈利成年那一刻起，莉莉给他施的魔法就失效了。在失效之前，哈利的姨夫姨妈一家离开了，因为凤凰社的人知道，如果他们继续留在这里食死徒肯定会杀他们的。

魔法部沦陷后，黑巫师忙着去追杀哈利一行人，暂无闲暇估计，所以应该没事。