呂仙觀位于洞庭湖畔的白鶴山上，建于唐未五代之后唐閔應順年（公元934年），為歷代道教圣地。咸豐十年（公元1806年）由李智亮道長募化重修為殿宇式建筑，正殿純陽宮為兩層純木結構，高約九米，此外還修有后土殿，呂仙亭、娘娘廟、靈宮殿等，形成了一帶古建筑群，氣勢壯觀，當時為“岳州八景”之一，可惜“文革”期間全毀無存。

1997年，香港譚兆慈基金會捐資重修呂仙觀，整個主殿為三層混凝土框架，仿古建筑，五脊頂，一樓呂祖殿，二樓玉皇殿，三樓三清殿。三層殿上下雕龍繪鳳，斗拱重檐，古色古香，神采飛揚。