W swojej pracy skupiał się przede wszystkim na problemach społecznych: fotografował bezdomnych, niepełnosprawnych, nieuleczalnie chorych.
Schwarz po raz pierwszy przyjechał do Polski w 1981 roku, aby sfotografować „Solidarność”. Po upadku komunizmu powrócił tutaj, zainteresowany elementami żydowskiej przeszłości, które odnalazł w miastach i wsiach w okolicach Krakowa.
Jego pasja doprowadziła do spotkania z brytyjskim antropologiem Jonathanem Webberem. Podjęli wspólny projekt, „Śladami Pamięci”. Prof. Jonathan Webber, wtedy wykładowca Oxfordu, dzisiaj przewodniczący UNESCO ds. Studiów Żydowskich i Międzywyznaniowych, był już wcześniej zaangażowany w badania terenowe w Polsce. Samodzielnie lub na czele większych grup badawczych, przemierzając miasto po mieście i wieś po wsi, zbierał informacje o reliktach żydowskiej przeszłości, które wciąż można było znaleźć na terenie Polski. Wynikiem badań miała być monografia pt. Ślady Pamięci: Ruiny żydowskiej cywilizacji w polskiej Galicji (w planach wydawniczych Litman Library of Jewish Civilization). Poszukując fotografa do projektu, Webber spotkał Schwarza.