桔井觀座落在郴州古城東門(mén)外約一里處(今郴州市第一中學(xué)內(nèi))。觀堂為唐代磚木結(jié)構(gòu)建筑，清代屢次重修，四周?chē)�以磚墻。觀東側(cè)有一株蒼老蓊郁的桔樹(shù)，樹(shù)旁有一眼清泉豎井。
相傳桔井觀為漢時(shí)仙醫(yī)蘇耽的故居。他駕鶴升天拜別母親時(shí)，母泣道：“你去后，丟下我孤苦一人，往后靠什么生活?”蘇耽雙手遞給母親一個(gè)石匣，說(shuō)道：“母親不必耽心，你以后就靠這個(gè)石匣維持生計(jì)。你想什么，叩一叩石匣，就會(huì)有什么。只是孩兒走后，人間并不安寧，鄉(xiāng)親們?nèi)粲胁⊥�，還望母親多多照應(yīng)�！苯又�，蘇耽告訴母親：“明年天下將有瘟疫流行，若是鄉(xiāng)親們前來(lái)求醫(yī)，每人只要贈(zèng)給院內(nèi)的井水一升，桔葉一片，即可獲救�！惫�然，在蘇耽升天后的第二年，天下瘟疫爆發(fā)，前來(lái)桔井觀向蘇母求醫(yī)的人絡(luò)繹不絕，有的甚至不遠(yuǎn)千里而來(lái)。蘇母按照兒子的囑咐，用桔葉和井水進(jìn)行醫(yī)治，凡服用者無(wú)不轉(zhuǎn)危為危，救活病人無(wú)數(shù)。于是，桔井觀從此名聞天下，受到世人的景仰和稱譽(yù)。