Nein, du kannst von einer Adresse erstens nicht auf den öffentlichen Schlüssel dieser Adresse schließen (sofern noch nichts von dieser Adresse ausgegeben wurde oder es sich nicht um eine Taproot Adresse handelt) und zweitens kannst du, selbst wenn du den öffentlichen Schlüssel hinter der Adresse kennen würdest, nicht auf andere Schlüssel bzw. Adressen dieser Wallet zurück rechnen.
Den öffentlichen Schlüssel den du hier meinst nennt man übrigens den erweiterten öffentlichen Schlüssel („xpub“).
Genauer hier erklärt: