Galeria mieści się w zabytkowym, drewnianym budynku byłej szkoły, a później przedszkola. Idea utworzenia tego miejsca powstała w 2015 roku, kiedy to ze względów sanitarnych i technicznych zachodziła konieczność przeniesienia placówki przedszkolnej do nowego miejsca. Od tego czasu budynek stał i czekał na lepszy czas. Co prawda od samego początku pojawił się pomysł przeniesienia do budynku Biblioteki Gminnej oraz zagospodarowania piętra na Galerię "dziadów", jednakże wysoki koszt remontu przewyższał możliwości finansowe samorządu.
W 2020 roku pojawiła się szansa na zrealizowanie tego ambitnego pomysłu, a to za sprawą Rządowego Funduszu Inwestycji Lokalnych kierującego wsparcie finansowe dla turystycznych gmin górskich w związku z negatywnymi skutkami pandemii COVID-19. Dzięki tym środkom Gminie Milówka udało się generalnie wyremontować cały budynek. Następnie przystąpiono do realizacji pierwszego etapu koncepcji, a mianowicie umieszczenia na parterze budynku Gminnej Biblioteki Publicznej, której otwarcie nastąpiło 17 czerwca 2022r. Kolejne prace polegały na stworzeniu ekspozycji ukazującej kolędowanie Dziadów Noworocznych i Szlachciców. Tu z pomocą przyszli etnografowie i folkloryści specjalizujący się w tej tematyce. Dużym wsparciem finansowym były również środki pochodzące z Unii Europejskiej, dzięki którym za pośrednictwem Euroregionu Beskidy udało się stworzyć całą ekspozycję. Galeria została uroczyście otwarta w styczniu 2023 r.