Te trzy rodziny stały się wkrótce znane w Mediolanie ze względu na ich styl życia, ich praktyki aktów pokutnych, ich sposób ubierania się i modlitwy, które w tamtym czasie były prowokująco skromne. Niektóre ich inicjatywy stały się w późniejszym okresie w Mediolanie zwyczajem, jak na przykład: bicie dzwonów o godzinie trzeciej po południu w piątek – dla wspomnienia śmierci Pana Jezusa na krzyżu; uroczyście celebrowali również wystawienia Najświętszego Sakramentu w różnych kościołach miasta (tak zwane Czterdziestogodzinne nabożeństwo).

Nie wszyscy w Mediolanie byli zadowoleni z gorliwości nowej rodziny duchowej, grożono nawet jej członkom. Byli oskarżani o pelagianizm i naśladownictwo kontrowersyjnego Fra Battisty (zm. 1 stycznia, 1534 r. ). Interweniowały władze kościelne i cywilne. Doszło do dwóch rozpraw. Pierwsza, przeciw Synom św. Pawła miała miejsce 5-go października 1534 r. bez orzeczenia werdyktu. Druga rozprawa przeciw Synom św. Pawła i Anielankom św. Pawła rozpoczęła się w czerwcu 1536 r. a zakończyła – 21 sierpnia 1537 r. pełnym uniewinnieniem.