Życie prywatne Rodzice Samira mają bośniackie korzenie i pochodzą z Sanskiego Mostu. Jego ojciec zajmuje się sprzedażą używanych aut. Jest żonaty z Zoją Trobec – byłą cheerleaderką KK Union Olimpija, z którą ma syna Alena urodzonego 19 stycznia 2011 roku i urodzonego 3 października 2013 Iana. Ślub odbył się w maju 2012 r. Jego kuzyn Jasmin jest bramkarzem słowieńskiego klubu NK Maribor, a szwagierka jest żoną koszykarza Jasmina Hukicia. Wzorem dla Handanoviča jest Peter Schmeichel.
Styl gry Jest obdarzony świetnym refleksem. Nawet gdy nie uda się mu odbić do boku strzału z dystansu potrafi szybko naprawić swój błąd. Dynamicznie wybiega z bramki i bezpardonowo rzuca się napastnikom pod nogi. Jego szybkość i dynamika sprawiają, że ozdobą spotkań są jego parady po strzałach z dystansu oraz interwencje przy rzutach karnych. Umiejętnie się ustawia, a także posiada daleki wyrzut.