从史料来看，赵构自冤杀岳飞之后从未对冤杀岳飞一事感到过后悔。
赵构宗释放岳飞、张宪家属的事情确实存在，但这不是赵构内心后悔的举动，相反这是赵构极不情愿的一个举动。
绍兴十一年十二月二十九日，赵构杀害岳飞、张宪、岳雲三人后，随后赵构发布诏令对岳飞、张宪的家属的处理措施是：
岳飞、张宪家属分送广南、福建路州军拘管，月具存亡闻奏，编配人并岳飞家属，并令杨沂中、俞俟，其张宪家属令王贵、汪叔詹多差得力人兵防送前去，不得一并上路，岳飞、张宪家业籍没入官。
——《建炎以来系年要录》
自绍兴十一年十二月之后，岳飞、张宪的家属一直处于流放状态。
绍兴三十一年（公元1161年），金朝皇帝完颜亮撕毁绍兴十一年的宋金和约，发动60万金军分四路南侵南宋。
在南宋危如累卵的情况下，南宋抗金力量抬头，著名抗金名将岳飞作为抗金的象征人物自然需要平反，杜莘老，太学生程宏图、宋芑，倪朴等人纷纷上书赵构要求平反岳飞。赵构此时也迫于金朝南下的压力，只能启用抗金人士，对于民间和官场对于平反岳飞的请求只好答应，以此稳固人心。
虽然有着官场和民间的请愿，但是赵构并未平反岳飞，只是解除了对岳飞、张宪家属的流放刑罚。
诏蔡京、童贯、岳飞、张宪子孙家属令见拘管州军并放令逐便，用中书门下省请也，于是飞妻李氏与其子霖等皆得生还焉！
——《建炎以来系年要录》
赵构在诏令中故意将岳飞与蔡京、童贯之流并列。蔡京和童贯在北宋灭亡后一直被视作祸国殃民的“丑类”，岳飞与蔡京、童贯并列，也就是岳飞被赵构视作蔡京之流，也是“祸国殃民”的“丑类”，这道诏令足见赵构对岳飞的憎恶 。
完颜亮的南侵击碎了赵构近二十年的歌舞升平的生活，也击碎赵构委屈求全的幻想，为了保住自己的奢靡生活和帝位，赵构不得已不启用抗金人士，抗金人士要求平反岳飞，对此赵构不愿意答应，但是迫于压力，他只得同意终结对岳飞家属的流放，但是为了表达他的态度，于是他故意将岳飞与蔡京、童贯并列，以此传达他的态度。