民间流传着一个关于“钱财有限，技艺无穷”的传说。相传明代徽州窑匠鲍四卖了砖窑到淮安去做生意，几年后，赚钱无数，竟成首富。得意时处处显富，在淮安修鲍四庙，塑全身像，揭榜造鲍四街。一个手抱长颈瓶，瓶插杨柳枝的中年妇女嵇首对鲍四说：“世上只有技艺无尽头，哪有什么钱财无限。”鲍四涨红脸，说：“你会什么技艺！”中年妇女说：“我会做莲花”。鲍四不信，提出自己一步放一个元宝，对方得跟着放一朵莲花，一决输赢。那妇人用手往地上一指，地上便现出一朵莲花，鲍四跟其后放上一只元宝。半里路下来，妇人的莲花尚有，鲍四的元宝却尽。淮安人用地上的元宝在放莲花的路面上盖了街房，起名叫“莲花街”。鲍四身无分文，砸了庙中的自身像，凑了点盘缠，回到徽州，重操旧业——烧窑。有人告诉他那以莲花赌元宝的妇女便是观世音，鲍四方领悟，“钱财有限，技艺无穷”是神仙教诲，从此一心归门烧砖，因对莲花印象太深，便烧起莲花砖，后又在砖上刻了花木、虫鱼、人物、楼阁，成了徽州砖雕的创始人。其时，一些徽商发财致富后，纷纷回故乡大兴土木，修词堂，建宅第，往往不惜重金。秀丽精美、清新淡雅的砖雕被广泛应用。从此徽州砖雕发展起来，名扬全国。
古城歙县斗山街集古民居、古街、古雕、古井、古牌坊于一体，并浓缩了派建筑的主要特色，这里尚存有不少的古民居，砖雕保存完好，堪称中国砖雕之宝库。斗山街的徽州砖雕可喻工艺一绝，虽有不少门楼上的砖雕已遭破坏，但仍见有不少保存完好的作品。见方尺余，厚不及寸的青砖上雕出情节复杂，多层镂空的画面，由近及远，前后透视，层次分明，画面古雅，颇具神韵，令人产生精妙无比的美感。
