Si lo que tienes ahora es un router, la respuesta es sí.
Lo único que tendrías que hacer sería entrar en la configuración del router y cambiarle las direcciones IP del DHCP y del DNS por las que te dé jazztel en el momento del alta.
Si es un modem usb lo que tienes :vayatela: :vayatela: :vayatela: :vayatela: :vayatela: eso ya no lo sé, pero en principio sí que podrías hacerlo… (a n ser que YA.com te lo reclame cuando te des de baja).