此时各地反叛沸沸扬扬，整个河北到处都是乱民，杨广对此也无奈，只得命人加紧催促杨玄感，令其不可误了大事。
此后杨玄感更进一步，只往辽东发一半的粮食，其余全部截留下来。
眼看杨广已经远去，杨玄感又偷偷传信自己的弟弟杨玄纵、杨万项二人，令他们偷偷潜回中原。
四月十五日一早，杨玄感突然囚禁跟他一起在黎阳的朝廷官员，并召集手上的运粮民夫和护卫，宣称“来护儿因为失军期而造反”，正回师准备攻打洛阳。众人半信半疑，杨玄感便亮出他用家奴伪装的使者，宣称正是从东莱郡归来的。
因为杨玄感的身份、地位，众人只得跟从。
至此，杨玄感开始了他的不甚好看的造反之路。