我们都知道在西安事变后，张学良也在1938年11月开始被蒋介石软禁，一直到1990年才恢复自由。张学良被软禁了这么多年相安无事，除了张四小姐的功劳，还有一个人的功劳也非常大，他就是霍守义。
自从霍守义加入了张学良的东北军，深受张学良的信任。可以说张学良对霍守义有知遇之恩。在他得知张学良被蒋介石软禁后，霍守义曾多次想去营救张学良，不过苦于张学良在蒋介石手中怕其有生命危险，所以一直按兵不动。
有一次，经过蒋介石特别批准的六名东北军高级将领在溪口见到了张学良。东北军都担心少帅的安危，然而少帅却说：“放心，只要有你们在，那蒋介石就不敢轻易动我。”因为少帅牢牢掌握着东北军，所以蒋介石也只是软禁张学良，并不敢怎么样。
探视回去之后，霍守义在接受蒋介石传召的时候，不卑不亢地表示：“张学良是自己的首长，软禁期间你敢动他，我就带部队灭了你！”这正是给蒋介石一个警告和威胁，也是他对张学良命令的遵从与忠心。