Lang geleden, in een prachtig oosters koninkrijk, stelden een koningin en haar volk hun goden tevreden door een mystieke pagode te bouwen. De pagode bood onderdak aan de vier goden en torende machtig boven het schitterende koninkrijk uit. Na verloop van tijd werd de koningin ziek en riep ze haar volk op om te strijden voor haar kroon. De kroon zou worden doorgegeven aan degene die de meest ongerepte tuin rondom de pagode kon aanleggen. De opvolger zou door de vier goden zelf worden gekozen.

Het doel van Four Gardens is om de meeste punten op het scorebord te verzamelen door landschapskaarten te voltooien en sets af te maken. Elke voltooide set creëert een panoramisch uitzicht op een tuin, en deze sets worden (verrassing) "panorama's" genoemd.

Spelers kunnen panorama's voltooien door eerst basiskaarten te leggen, grondstoffen te verkrijgen door aan de 3D-pagode te draaien en die grondstoffen toe te wijzen om aan de vereisten van elke basiskaart te voldoen. Zodra hieraan is voldaan, wordt een basiskaart een landschapskaart. Meerdere landschapskaarten die in de juiste volgorde zijn gelegd, vormen een panorama. Elke god heeft zijn eigen tevredenheidsmeter die hun welwillendheid jegens de tuinen en hun bouwers uitdrukt. Spelers proberen de goden tevreden te stellen door landschapskaarten te voltooien en panorama's af te maken.