Les non invités est l’histoire des nouveaux habitants de Windward House, une demeure sur les côtes anglaises, à proximité de Londres. Roderick « Rick » Fitzgerald (Ray Milland) et sa sœur, Pamela (Ruth Hussey), découvrent la demeure abandonnée lors d’un voyage et en sont immédiatement séduits. Étonnamment, ils parviennent à l’acheter pour seulement 1 200 livres et à y emménager immédiatement.
Peu de temps après avoir emménagé, les frères et sœurs font la connaissance de la petite-fille du vendeur, Stella (Gail Russell), 20 ans. Stella est mécontente que son grand-père, le commandant Beech (Donald Crisp), ait vendu la maison à Rick et Pamela, car elle est très attachée à cette vieille demeure en bord de mer. Des années auparavant, la mère de la jeune femme était tombée d’une falaise sur la propriété dans l’eau et avait péri, un acte qui la hante depuis lors.