岳雷是岳飞第二个儿子，刘氏生，字发祥，号夏卿，又号声甫。宋靖康元年（1126年）3月17日，生于山西平定县军中。据河南夏邑县《岳氏宗谱》记载：岳飞宣和六年（1124）年赴平定任偏校二年，至靖康元年（1126年）刘氏生岳雷后离开平定，金南侵中原时失散。建炎三年（1129年）寻回军中。
绍兴十一年（1141年）十月，“莫须有”冤案起，万俟卨严刑逼供，“飞久不伏，因不食求死，命其子雷视之。雷入侍奉看，飞始复进食，岳飞被难后，16岁的岳雷随同母亲李氏夫人被发配流放云南。
岳雷妻温氏 ，生四子二女，绍兴三十一年（1161年），孝宗皇帝为岳飞平反的前一年。