Hall effect Stick Magneten im eingelöteten Zustand einbauen?

Guten Tag an alle Leser, ich hab mir hall effect Potentiometer von einem Nachbarn in meinen ps4 Controller einlöten lassen. Nur das Problem war die hatten noch starken Stickdrift. Ich habe mir ein YT Tutorial angesehen um die zu kalibrieren (Nadel in die Löcher Stecken und dann den Stick bewegen) .

Nur hab warscheinlich etwas übertrieben und der Kleine Magnet (siehe Bild eins) hat sich um 180 grad nacch oben gedreht. Also hab ich die Abdeckung aufgebogen ohne irgendwas zu beschädigen, doch dabei ist der Magnet Herausgefallen.

Mein Problem ist das ich den nichtmehr auf die Aufnahme gesteckt bekomme im Eingelöteten Zustand da ich die Abdeckung nicht ablöten kann. Gibt es da irgendwelche Tricks? Habs schon mit ner Pinzette probiert. Danke für alle Antworten im Vorraus.

Der Obere...

Muss da rein;)