不久，銀姑父親見銀姑身懷身孕，打罵銀姑，銀姑含淚說出原委。銀父到鳳府找鳳天南，反被鳳天南打成重傷，不久死去。見袁銀姑的父親已死，銀姑的叔嫂強行霸占其房屋，將銀姑趕了出來。銀姑無處可去，去找原來投靠在自己家現在已搬出去的平四，不巧平四回滄州祭奠胡一刀去了。袁銀姑只得四處流浪，并在一破廟中生下袁紫衣。銀姑帶著小孩繼續流浪，遇見掃墓歸來的平四，與平四住在了一起，并與平四結為夫婦。鳳天南聽說平四娶了銀姑，派人追殺平四，銀姑與平四走失，又不敢回佛山，只能帶著孩子到處流浪。一日在一飯店碰見一幫無賴，被湯沛救下，并安頓在府中。可湯沛并不是正人君子，他以小孩做要挾占有了銀姑。