吳廉回到煙雨繡樓，望着那幅失而復得的落梅圖，思緒不由得飄向了遠方，那是一段令他衆生難忘的時光。兒時，吳家主君與夫人老師爭吵，吳廉便總是喜歡和姨娘陳映雪待在一起，看着她刺繡，聽着她唱歌，與她一起消磨着後宅漫長的時光。

可不是每次，他都有機會逃離父母的爭執。而每當這個時候，父母總會指桑罵槐，互相不服氣。而吳廉，就是這個“桑”。小小的吳廉就這樣被夾在中間，左右爲難，也沒法解脫。於是，在父母吵得火熱沒空搭理他的時候，他就會悄悄溜出去找陳映雪，在她那裏才能勉強喫上一口熱乎飯菜。

陳映雪最愛繡梅花，她還送給吳廉兩個繡着梅花的香囊。吳廉握着香囊，突然十分鄭重地告訴陳映雪，往後自己最喜歡的就是梅花。看着一針一線在小娘手中幻化成一幅美麗的圖案，吳廉也想試一試。而陳映雪也很是欣慰，總是耐心細緻地教導他。

這日，吳廉陪母親到郊外染坊查賬。趁嬤嬤外出，吳廉便在染坊裏閒逛，可他似乎看到了什麼不該看到的事情。回家之後，父親便詢問他今日的見聞。可吳廉卻謊稱自己一路都在睡覺，在染坊也待得不久。離開父親那裏，吳廉便徑直走到了陳映雪房中，自顧自拿起繡布繡了起來。待陳映雪回來，他便請求她教自己。這世上，哪有男子刺繡的事情，陳映雪擔心吳廉會被責怪，便勸說他好好用功讀書。可小孩子若是下了什麼決定，就會有一種莫名的堅持，吳廉也不例外。無奈，陳映雪只好叮囑他，萬不可將此事告知他的父親。

吳廉也很用功，繡藝越發出色。可不知是誰知曉了此事，帶着家中的幾個兄弟闖進他的房中，將他的繡布全部翻找出來，一股腦地扔到院裏。很快，吳廉父親也知曉了此事。於是，吳廉便跪在院中，任由那狠厲的鞭子打在他的身上。不僅如此，吳廉父親還遷怒陳映雪，將她狠狠打罵了一番，還要罰她禁足院中。這夜，吳廉從小道悄悄溜進陳映雪的院子，見她臉上依稀可見的巴掌印，心中滿是愧疚。陳映雪輕輕撫摸着吳廉的頭，說自己在這院中有他探望纔是三生有幸。明日，陳映雪就要到郊外莊子去了，臨走，她勸慰吳廉，定要用功讀書，將來考取功名。

爲了給小娘多準備一些盤纏，吳廉一大早就拿着自己的玉佩到當鋪去。可等他回到院子時，陳映雪已經將性命交給了三尺白綾。吳廉失魂落魄地回到陳映雪房中，呆呆地從天明坐到天黑。不知不覺，天已白。吳廉下定決心離家學習繡藝，將來成爲一名真正的刺繡先生。不知多了多少個春秋，煙雨繡樓終於建了起來。

煙雨繡樓漸漸做出了名堂，竟得到了淮州城富紳章家的賞識。於是，似乎是順理成章的，吳廉與章榕兒拜堂成了親。剛開始，吳廉對章榕兒極好，回門的時候也是做足了女婿的禮儀。可對於章榕兒的肢體接觸，他卻很是排斥，甚至有些嫌棄。吳廉突然提到要收徒，讓章榕兒親自去張羅。章榕兒並未察覺什麼不對，加之對吳廉心中有愧，便按照他的吩咐，招來了許多年輕女子。

眼看着這羣姑娘們歡欣雀躍地進來，吳廉便讓陳嬤嬤準備一張大號的繡布，打算繡一幅落梅圖。可繡了許多年，他越覺得這服落梅圖變得小氣了些。於是，他打算舉整個繡樓之力，繡一幅讓世人稱頌的煙雨繡。