文殊台在玉屏楼前悬岩上。其台为一巨石，中间平坦，左右凸起。台前空旷，是观赏南海风景的极佳处。传说古时，蓬莱仙岛的文殊菩萨，邀了天尊、地藏两个菩萨，驾着五彩祥云，来到黄山春游。他们来到玉屏峰上，见这里风光神奇美丽，各自心里都盘算着要在这里立个寺庙，享受万家香火。在游罢黄山返回蓬莱的路上，文殊躲在一旁，等天尊、地藏走远了，就掉转云头，飞奔黄山，抢先占了玉屏峰。天尊、地藏各自回府阿，为了抢占玉屏峰，天尊连家门也没进，就驾起祥云，赶回黄山。那地藏进了家门，匆匆收拾了一下行李，也驾起祥云，往黄山赶。不料文殊抢了先，已经在这里占山建寺，，大尊、地藏一齐责骂文殊不讲交情，吵着也要在玉屏峰建庙。文殊说：“我坐在这玉屏峰前的悬崖上，你们若能把我拉得起来，我情愿把这座仙山让与二位。”只见天尊和地藏各挽着文殊的一只手臂往上拉，一连拉了两次都拉不动，在拉第三次时，他俩花去九牛二虎之力，一下把文殊拉了起来。这时一位香客在一旁见了，高声讥笑道：“想不到，你们菩萨也这样你争我夺呀！”三个菩萨听了，不禁脸红心跳。当文殊还在拼命把身子往下坠时，冷不防他俩突然松手而逃，便重重地跌坐在高高的悬崖上，连岩石也陷下去一个印儿，就像座椅一样。玉屏峰前的这块悬崖，就是如今的“文殊台”，那文殊跌坐下去的岩石，就是“文殊座”。台左侧石上刻有“文殊台”三字，为张善孙所题。