陸奥国耶麻郡熱塩村（現在の福島県喜多方市）に渡辺利左衛門、りえの長女として誕生。生家は会津藩領の商家（油商）で、山形に支店もあった。岩4歳の時に天保の大飢饉が始まり、会津でも天変地異や凶作のため農村は疲弊していた。天保8年（1837年）9歳で父が急病となり死別。その49日後に家が火災に遭い、母の実家である温泉業「山形屋」に母、弟と3人で身を寄せることとなり、瓜生姓を名乗る。