烟霞亭又称“霞客亭”。明代大地理学家、旅行家徐霞客曾三次游览江郎山，留下游记3000余字。他在游记《初游江郎山》中这样写道：“夫雁宕灵峰，黄山石笋，森立峭拔，已为瑰观，然俱在深谷中，诸峰互相掩映，反失其奇；即缙云鼎湖，穹然独起，势更伟峻，但步虚山即峙于旁，各不相降，远望若与为一；不若此峰特出众山之上，自 为变幻而各尽其奇也。”为了纪念徐霞客，建造了霞客亭。徐霞客在《霞客游记中》作过精辟的描述。“霞客游踪”四个字是西兴泠印社秘书长吕国璋题写的。站在霞客亭仰望江郎山，在爱国诗人辛弃疾眼中是“三峰一一青如削，卓立千寻不可干，正直相扶无倚傍，撑持天地与人看。”