怀揣青云之志的无赖青年玉井金五郎，带着爱妻マン和独子胜则，投靠了若松港的帮派头目永田杢次。二人勤勤恳恳地劳作。某一天，年幼的胜则被筏子冲走，救他的是来自中国大陆的流民银五。见到匆忙赶来的マン，银五不禁颤抖，因为在她身上看到了已逝母亲的影子。此后一生，银五都在心底默默爱慕着マン。次年春天，势力突然壮大的友田组开始谋划夺取永田他们联合组的货物搬运业务。联合组的总头目大庭春吉宣布应战，金五郎也表明立场，与友田组对立。有一天，大庭恳请金五郎以“玉井组”的名义作为永田组的后盾，但金五郎因顾及永田而拒绝了。当晚，金五郎被大庭带到赌场，在那里遇到了熟人蝶々牡丹的お京……