取名“远香”，是因为它面临荷花池，夏日荷花盛开，清香满堂。宋代文人周敦颐有《爱莲说》，其中云“予独爱莲之出淤泥而不染，濯清涟而不妖”，“香远益清，亭亭净植”，故名“远香”。
远香堂为四面厅，是拙政园中部的主体建筑，建于原若墅堂的旧址上，为清乾隆时所建，青石屋基是当时的原物。它面水而筑，面阔三间。堂北平台宽敞，池水旷朗清澈，堂名因荷而得。夏日池中荷叶田田，荷风扑面，清香远送，是赏荷的佳处。园主借花自喻，表达了园主高尚的情操。
拙政园的远香堂，取名有二层含义：一是写实，此处临荷池，夏季荷风扑面，清香满堂；二是写意，源于宋代周敦颐的《爱莲说》：“爱莲之出淤泥而不染，濯清涟饿而不妖”，“香远溢清，亭亭净植”。