1127年靖康之变时岳飞那时只有二十五岁，他把三个孩子和老母亲姚氏托付给自己的妻子刘氏，自己再一次从军了。战乱年代，丈夫不在家，刘氏要带三个孩子和一个老母亲生活的确很辛苦。

但是刘氏却经不住这种艰苦，第二年（也就是1128年建起炎二年），刘氏扔下了姚氏和三个孩子自己跟着韩世忠手下的一个小军官跑了，做了他。在汤阴的岳飞母亲姚氏带了三个孙子、孙女举家找到在军中的岳飞，岳飞才知道这回事。

岳飞每爱刘氏，三个孩子也需要母亲，每到一个地方他就找她的妻子，以至于弄得所有的人都知道了岳飞丢了妻子的事，当时在关中的吴玠也知道了这件事，就送下了一个世家的女孩给岳飞，但是岳飞并没有接受，他想他能找到自己的妻子，所以将这个美女原封不动起送了回去。对这件事，吴玠非常佩服，他跟人家说：

“岳飞能打仗，咱们服，但那天我见到我送的女孩回来，我对岳飞更是由心衷的佩服，我吴玠比不上他。”

母亲到了以后，他才母亲和在人家的撮合下与现在的李氏结了婚。李氏是渔家子女，那年结婚的时候她已经二十八岁，比岳飞还大两岁，岳飞是见母亲和孩子没人照顾才娶了她。这李氏很孝顺，她的名字就叫孝娥，也很能生养，结了婚以后，一年生一个，一下子岳家就多了两人。其中最知名的就是银瓶小姐了。（事实上，银瓶在岳飞被害的当年就为父亲殉死了。,这是一个心志很坚定的小姑娘。）

在正史上，绍兴八年，岳飞才找到妻子刘氏，这还是同为大将军的由韩世忠帮他找到的，有一次他听部下说，一个小军官吹牛，他的老婆原是岳飞的老婆，知名小将岳云的母亲。韩世忠才知道，这岳飞的妻子刘氏已成为他下属的一个小军官的老婆，并又生有子女。韩世忠了解了整个原委，刘氏并非是战乱失散，这个将军收留他，而是刘氏经不起这小军官的勾引，与他私奔的。韩世忠将事件事告诉了岳飞，并劝岳飞把前妻领回去。岳飞知道妻子刘氏早已为作他人妇，他对韩世忠的劝说反应很冷淡，他不再想破坏两个家庭，也没有要回自己的前妻刘氏，从此岳飞对刘氏的思念彻底地埋藏了起来，直到他死于风波亭。这是后话。

所以象岳飞这样不好女色只知道打仗的将军真是少见。古人云，英雄美女，女人爱英雄，英雄喜欢美女，这好象是天经地义的事，但是岳飞是个例外。

“老爷，大少爷回来了，还带回来一个人，说是要见你。”李氏从岳飞手上接过孩子，一边跟岳飞说正事。

“哦，云儿回来了，另外来的是什么人？”岳飞问。

“不知道，象是有重要的事，大少爷正陪着他。”李氏老老实实地回答。