公元606年(大业二年)，杨广拜杨素为司徒，又改封他为楚公，食邑两千五百户。这一年，隋朝名臣杨素死在任上。谥曰“景武”，杨广追封他为光禄大夫、太尉公、弘农河东绛郡临汾文城河内汲郡长平上党西河十郡太守，赐给他载丧的鍂车、为他执斑剑的仪仗四十人。