凤凰山由于凤凰古寺一直香火不断。1938年张学良被蒋介石囚禁在这里，凤凰山也就更广为人知了。张学良将军在凤凰山囚居了一年零两个月。山上修建了网球场、鱼池、钓鱼台以及炮台和防空洞。当时的沅陵县长出于对张将军的敬佩，派人在凤凰古寺右侧的沅水绝壁上，修了一座两层的观江楼，让将军登楼远眺解闷，又在楼与古寺之间，建了一座天桥，桥下的鱼池里是一只向北翘首的乌龟。张学良将军曾据此自喻：期盼北归。将军当年无奈和痛苦的心情可略见一斑。