在黄山天海的平天矼，有一块大石头，名为飞来石，为什么叫“飞来石”呢？传说这块石头是宋代的时候，从天外飞来的呢！
相传，宋代有个叫单福的石匠，一生给人家造成了不少桥，心想也在自己家乡门口的江上建造一座，但叹息没有帮手。他膝下只有一女叫小姣，长得聪明美丽。
小姣知道父亲的心思，便要求参加帮助干。但那深山采石，百里运石的苦和累，小女子怎么受得了，所以单福就是不答应。小姣跪在地上苦苦哀求，单福没奈何，才含泪点头。
单福还把3个徒弟找来帮忙，不久就干起来了。由于开山运石的苦和累实在难受，大徒弟和二徒弟先后悄悄地溜了。
单福和女儿、三徒弟为修桥铁了心，继续风里雨里苦干着。但好几年过去了，运到江边的石头只有一小堆，这样累死苦死，桥也建不起来。小姣一咬牙，请人写了“捐身修桥”4个大字，插了个草标，坐到江边石堆旁。
一连3天，来看的人无数，但望望滔滔江水，就都走了。这天，忽然来了个瘸子，身背一把扇子，摘了草标，问小姣愿不愿意跟他走，小姣回答说：“什么时候把大山里的开采的石头全运到江边，就什么时候跟你走。”
这瘸子原来是八仙中的铁拐李。他挤出人群，腾云驾雾，很快来到百里外的大山，从背上拿下扇子，对着单福和三徒弟开出的石头就扇。石头竟都飞了起来，又纷纷都落在江边。
单福和三徒弟也被从山上扇到造桥工地。铁拐李还怕不够，又对身下立着的一块巨石扇了3扇子，他就站在那巨石上飞到江边。只见底下尽人，未敢让巨石落下。又听单福大声说：“石头够了！”
铁拐李便驾起云头，飘游起来，游到黄山，见黄山风景秀丽，便将石头落下。从此，这飞来石就给黄山增添了绝妙的一景。
到了明代，黄山的名声逐渐扩大，吸引了很多游者，除了众多诗人、文学家外，黄山还吸引明末著名地理学家、旅行家、探险家和散文家徐霞客先后游览过两次，相传“五岳归来不看山，黄山归来不看岳”就是徐霞客游黄山后写下的妙语。
在明末清初时期，黄山的名气更是日益高涨，这也归功于黄山的绘画艺术。明末清初形成的黄山画派以黄山为背景作画，驻足于黄山，潜心体味黄山真景，描绘黄山神妙绝伦的风景名胜。其中代表人物梅清、石涛、渐江更被称为黄山画派三巨子。
在清代关于黄山的茶，还流传着一个有趣的故事呢！相传，一个风和日丽、春意盎然的日子，乾隆微服私访来到了黄山，到山脚下的时候已到了中午。忽然狂风骤起、云涛滚滚，大雨来临，乾隆急忙避到附近一座农舍旁的毛栅内。
正巧老妇开门出来，见一位神姿飘洒、容态超逸的客官在毛栅内避雨，便客气地把客官让进屋里，乾隆忙问：“晴天白日，怎么下起大雨来，这雨何时能停？”
老妇答道：“黄山的天气就是这样，云散雨停，要不到半个时辰，说不定太阳又要出来，看来客官有急事，我去为客官弄点吃的好赶路。”
乾隆帝见村妇举止有礼，连连拱手，说有劳大娘辛劳了。老妇转身进了厨房，忙到竹篓里寻找鸡蛋，一个也没有。忽然想起，前几天把10个鸡蛋给家养母鸡孵雏了。急忙从鸡窝中取出6个，想了一会，还不如一齐取出煮熟给客官充饥。
不一会，老妇笑容满面地端来鸡蛋边说：“山里人没啥好招待，这些鸡蛋还请客官包涵了。”
聪明的乾隆帝明白这位贤惠大娘的好意。大娘又去开汤冲泡一杯香茶，乾隆帝品茗着连声称赞：“好茶！好茶！大娘，是何名茶，如此香甜爽口？”
大娘说：“云雾茶！我家有片茶园在高山顶上，茶树终年在云飞雾裹中生长，黄芽鲜嫩，再用屋后常年不断的泉水，开汤冲泡，分外香甜，它能提神、明目。”
乾隆帝随口而出：“御苑芬芳千万种，不及山中一缕清。”便挥手告别大娘的盛情厚意走出屋外，果真云散雨停，太阳又露脸了。
乾隆帝带着极好的心情畅游黄山。回到京城，常跟大臣们谈起黄山贤惠的大娘与云雾茶，从此以后在京城传为佳话。