Recuerdos del ayer gira en torno a Taeko, una mujer de 27 años y soltera que trabaja en Tokio en 1982 y que toma unas vacaciones en el campo con la familia de su cuñada. Durante las vacaciones, Taeko se encuentra a sí misma recordando su época de colegiala. La película va y viene entre esos dos momentos, con mucha nostalgia y un hermosísimo paisaje de fondo, en el que Taeko lleva a cabo sus flashbacks y trata de tomar algunas decisiones difíciles sobre su futuro.