相传西周年间，历王驾崩后，太子姬在逃难过程中与三峨产生了深厚的感情。后来太子姬登基为宣王，但因平定叛乱耽误了与三峨的重逢，最终三峨含恨升天。

‌为了纪念这段爱情故事，人们将双茂山的巨石凿刻成一男一女的佛像。

再后来，有人专门为了这一男一女的佛像修建了寺庙，就是双佛寺，这就是双佛寺的由来。

关于双佛寺还有另外一个凄美的爱情故事。