相传当年刘伯温因母亲过世回丽水老家奔丧，途经衢州，恰逢叛乱。他毅然领命指挥当地守军平息叛乱。明太祖朱元璋感念其功，赏赐给刘伯温金银财富。
刘伯温向来看淡名利，对金银赏赐分文不取，却悄悄地在衢州城外察访了一个偏僻地方，命人埋了金银，并在埋银地方盖了一座小小山神庙，在庙墙上写下一则隐语：“上七里，下七里，银子落在七七里。刘基书”。
插起招军旗，自有吃粮人。那座小庙被人知道后，常年香火不绝，凡是前来进香的人，都要念一念石壁上刘伯温所提的隐语，但无人能解。
一些乡绅学究，文人墨客，都想得到那批银子，但当地没有“七七里”这个地名。他们算尽了机关，有的说七加七等于十四里，银子应落在距小庙十四里的地方，派人寻找但都未找着；有的说七七等于四十九，银子应落在常山地界上，又派许多人去找，又寻不着。各种算法都用过，就是找不到那银子，寻找藏银的事也就渐渐地冷落了，但“上七里，下七里，银子落在七七里”这句隐语却被更多人所熟识。小庙所在的地方，也就成了人们口中的“七里”。
有一年春天，正当青黄不接时节，一位挑货郎担客人，经过七里的这座小庙，突然雷电交加，大雨倾盘，那货郎客只好进庙里躲雨。不觉夜幕降临，大雨还是下个不停。那货郎客家境贫穷，出门时家里已断了炊，指望他能早点赶回家，用换来的粮食养活一家老小。不料这场大雨把他绊住了，只好蜷缩身子在庙里拜坛前过夜。
那货郎客在昏迷中，忽见一位苍苍白发的老人，手拄龙头拐杖向他走来，用拐杖在他睡的地方捅了一捅：“你怎能喊穷叫苦，你是人间最富有的人，你枕的是金，铺的也是银，何不取去受用，更待何时？”忽而那老人不见了，那货郎客一下从睡梦中惊醒。他想这也许是仙人在点化他，就试着在拜坛前掘起来，果然掘得不少金银，成了富裕之户。
后来，一位察访宝物的先生路过此地，看了那条隐语，他解释道：“山民们前来参拜土地爷，都要在拜坛前三拜九叩，时起时立，即起、起、立。这‘立’与‘七七里’谐音，即暗示银子埋在拜坛之下。”但银子已经被人发掘了，乡绅学究们听得张口结舌，懊悔莫及。
