Hi.
Ja, das klappt.
Du kannst an der Fritzbox ein SIP-Telefon einrichten. Die Fritzbox hat einen integrierten SIP-Server.
Du schnappst dir also ein SIP-fähiges Telefon - und kannst es mit der Fritzbox koppeln. Wie das geht - steht z.B. hier: http://www.avm.de/de/Service/FAQs/FAQ_Sammlung/15677.php3
Ein geignetes Telefon wäre z.B. dieses hier: "Snom 300 SIP-Telefon Voice over IP" (erhältlich bei Amazon für unter 100€)
Grüße