Toto rozhodnutie bolo urobené ako ústupok agresívnemu postoju rodinných príslušníkov tých, ktorí boli zabití počas teroristického útoku z 11. septembra 2001. Podľa ich názoru by na mieste, kde stáli dvojičky, nemali byť inštitúcie, ktoré by mohli odvrátiť pozornosť od tejto tragédie. Predtým bolo oznámené, že na územie WTC môžu byť prijaté iba tie kultúrne inštitúcie, ktoré sa zaviažu, že nebudú nikdy konať výstavy a iné podujatia, ktoré by mohli uraziť vlastenecké cítenie Američanov. Výsledkom bolo, že Centrum kreslenia, ktoré malo zdieľať s Centrom slobody kriticky oceňovanú budovu navrhnutú nórskou kanceláriou Snohetta, zrušilo svoj nájom a hľadá ďalšie priestory.
Libeskindov plán bol tak opäť ohrozený: podľa jeho projektu mali byť kultúrne inštitúcie umiestnené vedľa pamätníka obetiam teroristického útoku v „odtlačkoch“základov zničených mrakodrapov. Jediným zaručeným „vlastníkom“budovy bude teraz návštevnícke centrum.
Hovorí tiež o zmenách v postavení úradov: Centrum slobody, ktoré sa dostalo do nemilosti, bolo koncipované ešte v roku 2002 ako inštitúcia venovaná histórii boja za osobnú slobodu na celom svete.
Po vyhlásení guvernéra Georga Patakiho o cenzúre v areáli WTC v júli 2005 opustilo radu veľa významných osobností verejného života, ktorí viedli návrh a výstavbu nového komplexu. Po poslednom Patakiho rozhodnutí odtiaľ odišlo niekoľko ďalších ľudí, vrátane Agnes Gund, čestnej riaditeľky Múzea moderného umenia a významnej filantropky. Teraz bude podľa analytikov obzvlášť ťažké získať peniaze na stavbu budovy Snohetta a pamätníka Michaela Arada. Osud budovy bol teda ohrozený. Neistá je aj budúcnosť budovy divadla, ktorú navrhol Frank Gehry: architekt sa sťažoval novinárom na úplný nedostatok kontaktov so zákazníkmi a realizácia projektu bola naplánovaná na „druhú fázu“obnovy Svetového obchodného centra. - teda v ďalekej budúcnosti.
