Wenn das nicht einfach geht, d.h. nur ein Stecker in ne andere Box, dann muss das imho evtl. die Telekom machen.
Du solltest im Keller einen Kasten haben in dem die Telefonleitung von draußen reinkommt. Evtl. ist das ne Mehrfachleitung, du brauchst aber nur 2 Drähte davon. Welche davon, das sollte dir die Telekom sagen. Dann solltest du auch ne Box haben wo das Kabel vom Kabel-Anschluss reinkommt. Jetzt ist halt die Frage, wo die Box bzw. das Gerät ist, dass aus dem Kabelanschluss den Telefonanschluss "rausholt". Dieser kann im Keller sein, aber auch im Wohnzimmer, also bei irgendeiner Kabeldose.
Geh doch einfach mal die Kabelstrecke ab und schau was da für Boxen dazwischen hängen.