A múzeum épülete a 19. század közepére nyúlik vissza: fémszerkezetei valamikor egy dél-kensingtoni üvegépülethez tartoztak, ahol az 1851. évi világkiállítás néhány kiállítását őrizték. Ez az 1856-ban épült múzeum lett a leendő Victoria és Albert Múzeum alapja, és vezetése 1872-re szilárdabb helyet keresett. A meglévő épületet javasolták felosztani London különböző kerületei között, hogy ott kis önkormányzati múzeumok jelenjenek meg. Csak az akkori nyomornegyed, a Bethnal Green hatóságai reagáltak erre a javaslatra. Megszerezték a teljes háromhajós szerkezetet fém tartószerkezetekből, amelyek oldalnyílásait üveg helyett tégla töltötte meg: az új falak kialakítása James Wilde-é volt. Az ő kezdeményezésére mozaik allegorikus képekkel díszítették őket, és a padlót márvánnyal fektették le.
A következő száz évben különféle dolgokat állítottak ki ott: a 18. századi francia festészettől kezdve a szecessziós bútorokig. Végül 1974-ben a múzeumot a Victoria és Albert Múzeum leányvállalatává nyilvánították, és a Gyermekkori Múzeum lett. Népszerűsége a londoniak és a turisták körében évről évre nőtt, de az újjáépítés iránti igény egyre nyilvánvalóbbá vált: 1872-ben Wilde-nak nem volt elegendő forrása a hall előkészítéséhez. És csak most, a Caruso St John rekonstrukciója után a múzeum épülete nagyobb egyértelműségre és jelentőségre tett szert.
Ez London első nyilvános műhelyépülete, amelyet nagy tapintat jellemez. Adam Caruso és Peter St. John munkája könnyen az újmodernségnek tulajdonítható, de a Gyermekkori Múzeum esetében sikerült átitatniuk a viktoriánus építészet szellemét.
Az előcsarnokot rejtő melléket kívülről porfír-, kvarcit- és mészkőlemezek szegélyezik, amelyek kőmozaikot alkotnak, amelynek díszmotívuma háromdimenziós sakktáblára emlékeztet. A múzeum neve ugyanazon a helyen van feltüntetve - máris valódi, sósból készült mozaikkal. Az építészek ezt a kiegészítést az épület fő térfogatához hasonlítják a firenzei bazilikák márványhomlokzataival, amelyek többi fala - mint a Gyermekkori Múzeum esetében - tégla marad.
Ugyanakkor a XXI. Század eleje ennek a "bejárati csoportnak" a lakonikus formáiban, a szín és az anyag gondos használatában érezhető. Belül a látogató belép a világos előcsarnokba, onnan pedig a múzeumi térbe beépített új kiállítási galériába. Egyébként a viktoriánus épület belsejét Caruso St John építészek állították helyre, nem pedig átalakították. Ahol a Wilde padló márványlapjai nem maradtak fenn, ott a padló deszkával van kikövezve, mint az épület fennállásának kezdeti időszakában - akkor még üvegből. A tervezés során használt színek vagy népszerűek, vagy ismerősek a XIX. Maga az állandó kiállítás nem vált interaktívvá, mint sok modern múzeumban szokás. Minden játék és a gyermekek mindennapi életének tárgyai szépen vannak elrendezve a vitrinekben: elvégre nagyrészt olyan felnőtteket csodálnak meg, akik képesek értékelni a múzeum múltbeli kikapcsolódását, akár a mindennapokról, akár az építészetről szól.