按大周制度，各诸侯王国诸臣当每五日一朝觐君上，可是杨毅自就国之日起，群臣仅朝觐过他一回。那时并无人告知杨毅，他每五日当受群臣朝拜，于是第二次朝觐那天，群臣聚于殿上，而杨毅却在县衙中睡着大觉。王子元便乘机说“豫章王年幼体弱，恐难受国政之累，朝会可以休矣”，实际意义上夺了杨毅朝会听政之权。

杨毅对王子元所行气愤不已，可却又无可奈何，因为王宫尚未完工，宫中官吏也尚未上任，王宫诸门钥匙便放在王子元处保管，杨毅想开朝会，无论如何也绕不开王子元。