随光武征伐，因功封乌伤新阳乡侯，建武中就国。传三世后，因罪国除，杨氏子弟就在乌伤安家。

杨氏以功封侯，多出能臣。杨璇的父亲杨扶曾任交阯刺史，是知名的能臣。杨璇的兄长杨乔为尚书，也多次上书言事，给孝桓帝留下了不错的印象。孝桓帝见杨乔不仅有干，而且相貌出众，就想让公主下嫁。杨乔不肯，却无法改变孝桓帝的主意，最后竟绝食而死。