白衣庵在今洪湖市乌林以东二十二里吕蒙口后面的一片红杨树林中，因吕蒙曾在此屯兵夺回荆州而得名。
传说关羽樊城一仗大获全胜，杀了庞德，活捉了于禁水淹七军，威振华夏。
关羽为胜利所陶醉。吴国都督吕蒙觉得夺回荆州的时机已经成熟，便奏请吴主孙权，乘关羽远在樊城，荆州城内兵力空虚之机，夺回荆州。
孙权采纳了吕的建议。为了麻痹关羽，吕蒙托病回建业(今南京市)治病。
关羽见吕蒙回建业，为了进一步加强对曹的攻势，就调走了荆州城的部分人马，使城里的兵力更为空虚。
孙权见时机已到，便令吕蒙为大都督，统领吴国兵马，夺取荆州。
吕蒙率领全体将士，身着白衣，扮作商人，溯江而上，然后在吕蒙口后的一片红杨林里驻扎，作进攻的准备。
这一招，最后也没有被关羽发现。在关羽毫无准备的情况下，吕蒙大兵压境，出其不意，赚开城门，一举夺回了荆州。
后人为了纪念吕蒙这次奇袭成功，在吕蒙当年扎营和乔装成白衣商人的红杨树林里，修了一座庵堂，庵内供奉着一尊吕蒙穿白衣扮作商人的塑像，名为“白衣庵”。
