Muziejaus pastatas datuojamas XIX a. Viduriu: jo metalinės konstrukcijos kadaise priklausė stikliniam pastatui Pietų Kensingtone, kur buvo saugomi kai kurie 1851 m. Pasaulinės parodos eksponatai. Šis muziejus, pastatytas 1856 m., Tapo būsimo Viktorijos ir Alberto muziejaus pagrindu, o 1872 m. Jo vadovybė ieškojo tvirtesnės vietos. Ir esamą pastatą buvo pasiūlyta padalinti tarp skirtingų Londono rajonų, kad ten atsirastų nedideli savivaldybės muziejai. Į šį pasiūlymą atsiliepė tik Bethnalo Greeno, tuo metu lūšnyno rajono, valdžia. Jie gavo visą trijų navų metalinių santvarų konstrukciją, kurios šoninės angos buvo užpildytos plytomis, o ne stiklu: naujų sienų dizainas priklausė Jamesui Wilde'ui. Jo iniciatyva jie buvo dekoruoti mozaikiniais alegoriniais vaizdais, grindys buvo paklotos marmuru.
Per ateinančius šimtą metų ten buvo eksponuojama daugybė dalykų: nuo XVIII a. Prancūzų tapybos iki Art Nouveau baldų. Galiausiai, 1974 m., Muziejus buvo paskelbtas Viktorijos ir Alberto muziejaus filialu ir tapo vaikystės muziejumi. Jo populiarumas tarp londoniečių ir turistų kasmet augo, tačiau rekonstrukcijos poreikis tapo dar akivaizdesnis: 1872 m. Wilde'ui nepakako lėšų vestibiuliui pastatyti. Ir tik dabar, rekonstravus Caruso St John, muziejaus pastatas įgavo daugiau aiškumo ir prasmės.
Tai pirmasis viešųjų dirbtuvių pastatas Londone ir jis išsiskiria dideliu taktu. Adomo Caruso ir Petro Sent Džono kūrinį nesunkiai galima priskirti neo-modernizmui, tačiau vaikystės muziejaus atveju jiems pavyko perteikti Viktorijos laikų architektūros dvasią.
Prieangį slepiantis priestatas iš išorės išklotas porfirio, kvarcito ir kalkakmenio plokštėmis, kurios suformuoja akmens mozaiką, kurios ornamentinis motyvas primena trimatę šachmatų lentą. Muziejaus pavadinimas yra išdėstytas toje pačioje vietoje - jau su tikra mozaika iš smalto. Architektai šį priedą su pagrindiniu pastato tūriu lygina su marmuriniais Florencijos bazilikų fasadais, kurių likusios sienos - kaip ir Vaikystės muziejaus atveju - lieka plytos.
Tuo pačiu metu lakoniškose šios „įėjimo grupės“formose jaučiamas XXI amžiaus pradžia, kruopščiai naudojant spalvas ir medžiagą. Viduje lankytojas patenka į šviesųjį vestibiulį, o iš jo - į naująją parodų galeriją, pastatytą muziejaus erdvėje. Priešingu atveju Viktorijos laikų pastato interjerą architektai Caruso St John restauravo, o ne pertvarkė. Kur neišliko marmurinės „Wilde“grindų plokštės, grindys išklotos lentomis, kaip buvo pradiniu pastato gyvavimo laikotarpiu - tada dar stiklinės. Dizaino spalvos yra populiarios arba žinomos XIX a. Ir pati nuolatinė paroda netapo interaktyvia, kaip įprasta daugelyje šiuolaikinių muziejų. Visi žaislai ir kiti vaikų kasdienio gyvenimo daiktai yra gražiai išdėstyti vitrinose: juk jie dažniausiai žavisi suaugusiaisiais, gebančiais įvertinti muziejaus praeities poilsį, nesvarbu, ar tai būtų kasdienybė, ar architektūra..
