1528年农历十月的某一天，他到增城（今属广东）祭祀了他的一位祖先，这位祖先叫王纲，曾为朱元璋效力，后来到两广剿匪，死在回去的路上。看到这位祖先的塑像，王阳明第一次有意识地踏进了回忆祖先的河流。
王阳明的祖先可追溯到晋朝名人、孝悌楷模王览。王览和亲爹、亲妈以及同父异母哥哥王祥生活在一起。他的亲妈经常对王祥非打即骂，王览总为哥哥解围。有一次，他的亲妈在酒里投毒，准备谋害王祥。王览事先得知消息，从他哥哥手里抢过酒杯满眼含泪要一饮而尽。他的亲妈惊慌地夺下酒杯，发现了王览的苦衷。从此后，这位母亲奇迹般地变成了慈母。
朝廷知道这件事后，就任命王览为禄大夫（政府名誉顾问），王家成了官宦人家。多年之后，王览的一个曾孙，大名鼎鼎的书法家王羲之的后代把家搬到浙江会稽。又过了好多年，王阳明的二十三世祖王寿把家迁到浙江余姚，直到王阳明为止，王家就始终在余姚繁衍生息。
