鄰壤，這樣可能沒有釀禍的根基。
”又逐條奏上海防之事，内中說：“蘇、松、浙江水師都由總兵統領，駐紮在定海，陸師都由副總兵統領，駐紮在金山衛，并受總督節制。
現在督府既然已經改變，那麼已經劃定的兩鎮，彼此牽制，不能調發。
因而請求劃地分轄，各地都有水軍和陸軍。
”這些建議都得到了批複。
這一年戚繼光大破賊寇，瀕海的剩餘寇賊流竄到浙江。
官軍在連嶼、陡橋、石坪等地迎擊，斬敵人百多名。
新倭又犯石坪，将士乘勝殲滅了他們。
趙炳然因為援助剿寇有功，朝廷又贈他金币，進而升為右都禦史兼兵部右侍郎。
給事中辛自修彈劾罷去戎政都禦史李钅遂，請求選擇素知兵戰的人代任。
于是诏封趙炳然為兵部尚書，協助治理戎政。
過了一年，皇上又下诏命趙炳然兼右都禦史，總督宣、大、山西的軍務。
新平、平遠、保平三堡靠近宣府，舊屬大同。
天城與它們相距有六十裡遠，孤懸在塞外，中間隔有崇山，敵寇的騎兵時有出沒。
趙炳然上奏請求添設參将，另成一營，報告得到批準。
不久因總兵官馬芳等人打退敵人有功，得到賞賜。
之後，他被召還部裡，代楊博為尚書。
考核期滿，加封太子少保。
趙炳然清明勤勉練達，所到之處都有聲望和政績。
隆慶初年，因病請求退休離去。
死後，贈太子太保，谥号恭襄。