一日，殿下顾臣士奇曰：“古人主为诗者，其高下优劣何如？”(士奇)对曰：“……殿下于明道玩经之余，欲娱意于文事，则两汉诏令亦可观，非独文词高简近古，其间亦有可裨益治道。如诗人无益之词，不足为也。”殿下曰：“太祖高皇帝有诗集甚多，何谓不足为？”对曰：“帝王之学所重者，不在作诗。太祖皇帝圣学之大者，在《尚书注》诸书，作诗特其余事。于今殿下之学，当致力于重且大者，其余事可姑缓。”
帝王之学所重者固不在作诗，但记诵辞章，竟被杨士奇视为“俗儒”。主持内廷事务的司礼监太监王振，虽然在一些具体问题上与二杨存在矛盾，但对于维护传统道德和秩序，与他们的立场是一致的。《罪惟录》记载：英宗为太子时，王振即“导之以礼”，英宗“雅敬惮之”；英宗即位后，“尝与小臣击球，(王)振至而止。诘旦，驾在阁中，振跪奏曰：‘先皇帝为一球子，几误天下。陛下复踵其好，如社稷何？’”王振的这番话，不但批评时下的皇帝英宗，而且批评已经去世的皇帝宣宗，内阁杨士奇等人听了，连连赞叹：“宦官中宁有是人!”(查继佐《罪惟录·宦寺列传》)