游戏将带领玩家作为一个无法安息的幽灵，在一根拥有魔力的权杖召唤下，进入一个遥远的古代文明神秘世界，感受它的奇幻美丽的景色，并支配那里的人们按照自己的意愿行事，利用手中这根拥有魔力的权杖披荆斩棘，解开一个个隐匿已久的秘密，并最终拼凑出真相。

《幽灵记忆》只有15个关卡，一并贯穿4个不同的世界，这和其他益智解谜游戏动辄上百的关卡比起相差甚远。不过正如同《纪念碑谷》在最初也仅有10个关卡的情况类似，开发商 Paplus 信奉的是少而精的原则，因此在每个关卡中势必会加入丰富而充满创意的细节设计。