建武二年(公元26)夏，“常将妻子诣洛阳，肉袒自归”。刘秀见到王常来降甚是高兴，慰劳说道：“王廷尉良苦。每念往时，共更艰厄，何日忘之。莫往莫来，岂违平生之言乎?”这番话，先问候辛苦，接着回忆往事，表示不忘旧交之意，最后引用《诗·那风·终风》“莫往莫来，悠悠我思”之句，对王常久事更始不早归朝略加批评，意谓有违平生之言。
王常闻听此言顿首答谢说：“臣蒙大命，得以鞭策托身陛下。始遇宜秋，后会昆阳，幸赖灵武，辄成断金。更始不量愚臣，任以南州。赤眉之难，丧心失望，以为天下复失纲纪。闻陛下即位河北，心开目明，今得见阙庭，死无遗恨。”其大意讲，臣子承蒙大命，有机会执鞭跟从陛下；最初相遇在宜秋，后来相会在昆阳，有幸依赖灵武保佑，与陛下及陛下之兄长深相结交；更始信任我这个愚笨的臣下，委以廷尉行南阳太守的重任；赤眉入长安更始蒙难，使人丧心失望，以为从此天下再次失去了纲纪；听说陛下在河北继承大位，顿令人心开目明，今天能够亲眼见到陛下，死也没有遗恨了。