年少之时，他初入京中，人生地不熟，上头态度不明，过得十分艰难，除了与杨表兄他们玩耍作伴之外，再无同伴。
后来通过杨舅父设法，拜在王大学士门下研读经书，得了展露才华的机会，从而结识了许多人。
王瑟、二皇子、裴扬，都是那个时候认识的。
福王也曾试图请王大学士收了裴扬，父子登门拜访那天，他在藏书楼二楼独自看书，正看得入迷，一只小梨被人从窗外扔进来，不偏不倚刚好砸在他头上。
他被打得很疼，颇生气，四处一看，窗外那棵老梨树的枝丫上趴着一个人，年岁与他差不多大小，长得唇红齿白、一双顾盼生辉的桃花眼，穿得华贵讲究，见他看来，就冲他得意洋洋地挥手。
他那时处境艰难，心中颇多怨气，又猜到这位怕是皇帝亲侄，并不想与此人有过多瓜葛，便冷着脸去关窗，来个眼不见心不烦。
不想裴扬“哎呀”一声惊叫，从梨树枝丫上掉了下去。
他被吓了一跳，忙着跑下楼去救人，却见裴扬好不好地立在树下冲着他做鬼脸发笑。
他很生气，转身要走，裴扬却追上去拽着他的袖子，软声央求：“这位小哥，你是王大学士的弟子吧？能不能带我去藏书楼里看看？外头都说这里头藏得有黄金屋和颜如玉。你见过了吗？黄金屋有多大？颜如玉美不美？”
他被逗笑了。
书中自有黄金屋，书中自有颜如玉，是励学的，并不是说学士府的藏书楼里真有金屋美人。
是以，他觉着面前这位皇亲贵胄怕是个酒囊饭袋，更觉着师父一定不会收为徒弟。
毕竟二皇子五岁为皇帝亲自开蒙，号称聪颖好学，也不是师父心甘情愿收下来的，而是迫于皇威不得不收。