Sim, você só não precisa pagar se adquirir outro imóvel em até 180 dias.
Isso, complementando, se vendeu um imóvel residencial e adquirir outro imóvel residencial de valor igual ou superior em até 180 dias. (se menos do que 450mil, paga imposto da diferença)