Cuenta vivienda con dos titulares

Desde 2007 tengo una cuenta vivienda abierta con mi ex pareja. Las aportaciones eran igualitarias.

Ahora lo hemos dejado y necesitaría saber si puedo devolverle la mitad de esa cuenta y seguir yo como única titular de la misma, hasta el momento en el que compre una casa el año que viene. No sé si él o yo tendríamos algún problema fiscal a la hora de hacer la declaración si hacemos esto.