Bonjour,
Normalement pour la téléphonie, la prise utilisée est un RJ11 (prise à 4 plots)
Et il existe quantité de prises murales RJ11, comme vous voulez le faire.
Le câblage dans ce cas est simple: les 2 fils que vous avez sur votre prise actuelle vont sur les 2 contacts du centre de la prise.
http://www.forum-telephonie.com/images/temp/rj11.png

Néanmoins, vous pouvez aussi utiliser une prise RJ45 (mais qui entrera sur la prise RJ11 de votre box, les prises RJ45 de celle-ci étant pour le réseau Ethernet).
Dans ce cas aussi, les 2 fils que vous avez sur votre prise actuelle vont sur les 2 contacts du centre de la prise.
http://www.forum-telephonie.com/images/temp/rj45.png

Le composant que vous avez dans votre prise actuelle peut (et bien souvent avec l'ADSL) être supprimé. Il servait à France Telecom pour exécuter des tests de ligne distants. Lorsqu'il commence à être défaillant, il créé de sacrés perturbations au niveau de la téléphonie ou de la connexion internet.
Vous ne passez pas avec la fibre ?