給永明王，被提升為兵部尚書。
不久，大清兵來進攻，如璜陣亡了，家玉逃往西鄉。
他的祖母陳氏、母親黎氏、妹妹石寶都投水自殺了，他的妻子彭氏被捉後，也不屈而死，他家鄉的人被全部消滅了。
西鄉的一個大豪強陳文豹支持家玉占領了新安，襲擊東莞，又在赤岡交戰。
不久，大清的大部隊大舉而來，攻打了幾天，家玉戰敗，逃往鐵岡，文豹等都死了。
覺斯把家玉恨透了，挖了他祖先的墓地，連家廟都給他拆毀了，全部消滅了他的族人，他家所在的鄉村變成了一團廢墟。
家玉從故鄉經過時，痛哭着離開了。
路上他招集了幾千名士兵，攻占了龍門、博羅、連平、長甯，接着攻打惠州，占領了歸善，收兵駐紮在博羅。
大清兵過來攻打他，家玉退到龍門，又招募了一萬多士兵。
家玉喜歡擊劍，以俠客自許，跟草澤上很多豪傑有來往，因此所到之處人們都服從他。
他就把招募來的兵士分為龍、虎、犀、象四營，攻取了增城。
十月，大清部隊的步兵和騎兵一萬多人過來攻打增城。
家玉把他的隊伍分作三部，犄角相救，憑據高山巨谷固守。
大戰了十天，兵力不支，戰敗了，裡裡外外被圍了幾層。
将領們勸他突圍出去，家玉歎息說“：箭射完了，炮震裂了，想打也沒武器好打了；軍官受了傷，士兵死了這麼多，想打也沒人能打下去了。
為什麼還要猶豫不決，等着用脖子上的血濺在敵人手上呢？”接着一個一個地拜别手下的将領，自己跳進野塘裡死了，終年隻有三十三歲。
第二年，永明王追贈家玉為少保、武英殿大學士、吏部尚書、增城侯，谥文烈。
他的父親張兆龍還在世，就把兒子的爵位封給了他。