bezpieczeństwa w organizacji Electronic Frontier Foundation, przeanalizował ruch sieciowy generowany przez aplikację i potwierdził, że poszczególne zgłoszenia są anonimowe, a program nie gromadzi danych geolokalizacyjnych ani informacji o urządzeniach użytkowników.
Twierdzenie Aarona, jakoby wersja aplikacji na system Android w większym stopniu niż iOS mogła prowadzić do deanonimizacji użytkowników, zostało zakwestionowane przez zespół deweloperski systemu GrapheneOS. Zarówno redakcja The Verge, jak i ekspert ds. cyberbezpieczeństwa Bruce Schneier, wyrazili wątpliwości wobec niektórych deklaracji dotyczących prywatności składanych przez twórców aplikacji.
Micah Lee, dziennikarz znany z udziału w opracowywaniu materiałów ujawnionych przez Edwarda Snowdena, wskazał na liczne problemy z przejrzystością działania ICEBlock, w tym niepoparte dowodami twierdzenia o ochronie prywatności, brak otwartego dostępu do kodu źródłowego, odmowę przeprowadzenia niezależnego audytu bezpieczeństwa oraz brak procedur pozwalających na zgłaszanie fałszywych zgłoszeń.