相傳，團湖曾是觀世音沐浴療毒之地。據當地人講：觀世音乃紅蓮之身，常與黑蓮爭奪生存空間，每每交鋒各有勝負。黑蓮本是魔界精靈，后黑蓮拜師東天佛祖，學了許多旁門左道的功夫，觀世音與之再戰時，中了黑蓮的毒鏢，渾身奇癢，難受無比，服下了許多仙丹仙藥，卻始終不見其效。觀世音無奈，只得去找師尊西天如來求治，如來說：“此傷為陰毒所致，非常藥可醫，需同時用五江之水沖洗，方可除毒消災。”觀世音說：“用五江之水，一個接一個的來還可以，要同時用五江之水，這可就麻煩了，我還沒這個能耐。”“這個不妨我來。”只見如來揚起拂塵在東洞庭湖畔畫了一個圓圈(今團湖)，再將五條江的出水口引至圈內，形成五渚灌團湖。并叮囑觀世音：“在荷花盛開時，跳到團湖去沖洗。”觀世音羞紅著臉說：“我是修身十世的貞女，豈能因一時磨難而顯露真身?”如來說：“這就是你的事了。”觀世音無奈奇癢，只得遵令來到團湖就地取材，以團湖為浴盆，以柳枝蘸甘露在團湖外圍畫了一圈，頓時方圓百里長出了高丈余的蘆葦，以之為帷幔，以防凡眼偷窺，同時，又吹一口仙氣，把荷葉化作有團湖大一把巨傘，蓋在團湖上，以遮天眼，再將荷花撒滿團湖，然后跳入湖中沐浴。因中毒太深，一次沐浴難以盡除。以后數年，每當荷花盛開，觀世音都到此沐浴，最后除盡了陰毒。隨后，如來又用神力點化觀世音的蓮花座，觀世音將蓮花座拋入團湖，固定了團湖的地盤，黑蓮精再也不敢來此侵擾了。