Однако уже на этапе возведения Сан Жи стало понятно, что на нем лежит какое-то проклятие. Десятки рабочих погибали при весьма странных обстоятельствах: умирали под внезапно рухнувшим подъемным краном или ломали шею при падении с большой высоты даже при наличии страховки. Жители окрестностей были уверены, что город полон злых духов. Из уст в уста передавались душераздирающие истории о неком «лагере смерти», когда-то находившемся в здешних местах.
В итоге в конце 1980-ых годов строительство города заглохло. Инвесторы все ждали, что на «космические» апартаменты найдутся покупатели, однако дальше переговоров дело не заходило. Суеверные тайванцы не желали вкладывать свои сбережения в недвижимость, зная о загадочных особенностях города. В результате курорт превратился в очередной город-призрак. Великолепные пляжи безлюдны, пузатые дома пустуют, а дорожки порастают сорняками. Местные власти даже хотели снести городок, но их остановила волна протестов: люди боятся, что вся нечисть после разрушения этих домов отправится гулять по близлежащим деревням.