Os irmãos Maysles visitam Edith Bouvier Beale, de quase 80 anos, e sua filha Edie. Recluso, o casal vive com gatos e guaxinins em Gray Gardens, uma mansão em ruínas em East Hampton. Edith é seca e perspicaz - uma cantora, casada, mas depois separada, membro da alta sociedade. Edie é volúvel, se veste - como ela mesmo diz - para o combate com conjuntos justos que incluem lenços enrolados na cabeça. Há indícios de que Edie voltou para casa 24 anos antes para ser cuidada em vez de cuidar de sua mãe. As mulheres se dirigem à câmera, falando umas sobre as outras, passando do presente para os acontecimentos de anos antes. Eles são estranhos, com forte afeição um pelo outro.

Mãe e filha - Big Edie e Little Edie Beale - moram com seis gatos em uma casa em ruínas em East Hampton. Little Edie, de cinquenta anos, que usa lenços e cores brilhantes, canta, guarda a câmera e fala com Al e David Maysles, os cineastas. Big Edie, em seus 70 anos, recita poesia, comenta sobre o comportamento de sua filha, e canta "If I Loved You" em boa voz. Ela fala em frases curtas; sua filha em volumes. O filme é episódico: amigos visitam, há um pequeno incêndio na casa, Little Edie vai para a praia e nada. Ela fala sobre a Igreja Católica. Ela tem vergonha que as autoridades locais invadiram a casa por causa de todos os gatos. Ela valoriza ser diferente.