Dům byl postavený na počátku 20. století podle návrhu Germana Wanderleye. Svůj název dostal dům podle čtyř monumentálních mužských soch, které na svých ramenech drží zdobné pilíře. Zkomolenina slova atlas přinesla domu název U čtyř mamlasů.
Jméno domu je zkomoleninou čtyř atlasů nesoucích na zádech tíhu sloupových hlavic.Sochy jsou dílem sochaře Johanna Eduarda Tomoly. Ostatní bohatou výzdobu provedl Alfred Dressler. Vnitřní uspořádání paláce navrhl A. Prastorfer.