张耀扬并没有结婚，所以也没有孩子。

和很多香港艺人一样，张耀扬出身贫苦，家里有九口人，兄弟姐妹众多，父母为了生计日夜忙碌，有时候根本无暇照顾孩子。

九岁的时候，张耀扬曾出了一场车祸，撞到了脑袋，让他忘掉了很多事情。

在导演林岭东筹拍“风云”三部曲之《龙虎风云》时，周润发等主角都已经找好，但反派却一直没着落。后来这个角色就落到了张耀扬的身上。