Pilonova galerija, ustanovljena leta 1973, je nastala iz umetniške zapuščine, ki jo je sin slikarja in fotografa Vena Pilona po očetovi smrti (1970) podaril mestu Ajdovščina.

Zbirko smo pozneje obogatili z odkupi in darili.

V zapuščini je tudi bogati arhivski fond: dokumenti, rokopisi, korespondenca, knjige in osebni predmeti umetnika.

Ob stalni zbirki Pilonova galerija skrbi tudi za razstavni program, ki vključuje slikarstvo, kiparstvo, grafiko, arhitekturo, oblikovanje in fotografijo.

Galerija združuje dve hiši, prva je Pilonova domačija, kjer je delovala pekarna slikarjevega očeta.

Obe fasadi sta ločeno ohranjeni, tako kot tudi notranjost slikarjeve domačije z vsemi detajli.

Avtor prenove obeh hiš v galerijo je ajdovski arhitekt Svetozar Križaj (1921-1996), ki je za to delo prejel leta 1976 Plečnikovo nagrado.