北宋词人秦观于绍圣三年(1096)被贬来郴，住在郴州旅舍，作《踏莎行·郴州旅舍》词。后旅舍被毁。1989年按宋代营造法式和湘南民居建筑风格重建于苏仙岭山脚玉溪桥旁。面积100平方米，内设五间展室，外建三墙门楼。门楼横额“郴州旅舍”，系省政协主席刘正手书。

展室门额篆刻“淮海遗芳”及楹联，为秦观33代孙、扬州师院教授秦子卿撰并书。展室置秦观半身胸像及其在郴遗作23件，展出全国部分书法名家条幅字画33幅。