17 marca 1899 roku kardynał James Gibbons skierował do Leona XIII odpowiedź. Przyjął w niej odrzucenie poglądów opisanych w Testem benevolentiae nostrae, zarazem jednak zaprzeczył, aby poglądy te były nauczane przez amerykańskich katolików w formie przedstawionej w papieskim liście.

W Kościele amerykańskim istniały jednak rzeczywiste konflikty pomiędzy środowiskami określanymi jako bardziej liberalne lub „amerykanizujące” a ich konserwatywnymi krytykami. Dotyczyły one m.in. stosunku do demokracji, szkolnictwa katolickiego, asymilacji imigrantów, relacji między Kościołem i państwem oraz udziału katolików w życiu społecznym państwa pluralistycznego. Z tego powodu część historyków rozróżnia między amerykanizmem jako zestawem tez doktrynalnych potępionych w 1899 roku a szerszymi, rzeczywiście istniejącymi sporami w amerykańskim Kościele końca XIX wieku.

„Fantomowa herezja” Historyczny charakter amerykanizmu stał się przedmiotem wieloletniej debaty. Thomas T. McAvoy określił potępienie amerykanizmu jako jeden z najbardziej niejasnych epizodów w historii katolicyzmu w Stanach Zjednoczonych.