En el único caso en que compraría segunda residencia sería teniendo chavales pequeños y que fuese una que estuviese como máximo a una o una hora y media de la residencia habitual, para poder aprovechar todos los fines de semana. Para ir de vez en cuando es una locura con los precios actuales.
Ni aún así, eso te vale hasta que tengan 10 años como máximo, al final los chavales lo suyo es que se relacionen con los de su barrio/colegio y cuando lo hacen es en fin de semana, si los llevas de un lado a otro al final están entre dos mundos.
A mí la segunda residencia no me tira en exceso por eso, salvo casos concretos (jubilación, aficiones de montaña/playa, críos ya mayores) y lo de alquilarlo en tiemporada baja ya tiene que ser una zona con bastante gente y que no quieran alquileres largos.
El precio de un piso da para muchas vacaciones todo pagado
P.D. Un piso normal con un 5% de rentabilidad anual ya te da para vacaciones y sin limitación de lugar