Un chico llamado Sota Hatate tiene la habilidad de poder ver una especie de “bandera” (Flag) o letrero sobre las cabezas de las personas, como si fueran personajes de una novela visual o de un videojuego de citas. Estas “Flags” marcan puntos críticos en las vidas de las personas en los que sus decisiones pueden determinar si consiguen un trabajo, una amistad, una victoria, enamorarse e incluso morir. Un día Sota pasa a estudiar en la prestigiosa Academia Hatagaya, en Tokio, pero en vez de vivir en la residencia estudiantil acaba viviendo bajo el mismo techo de cinco preciosas chicas.