Die Adressen werden vereinfacht gesagt vom Private Key abgeleitet und gehören dir ... solange du den gleichen PK verwendest natürlich und diesen auch gut aufhebst.
Der Private Key und die Adressen (inkl. deren Private Keys) die davon abgeleitet werden entsprechen hierbei den 12-24 Seed Wörtern welche du beim ursprünglichen Aufsetzen des Ledgers als Backup erhalten haben solltest. Wenn du mit diesen Seed Wörtern einen anderen Ledger aufsetzen würdest, könntest du mit deinem Passwort / deiner Passphrase auf genau dieselben Bitcoin Adressen zugreifen die du jetzt hast.
(und natürlich auch jeder potentielle Dieb -- deswegen: sicher aufbewahren!)