Jako, że Raczko był Litwinem, a mimo to posiadał polski herb, należy z całą pewnością stwierdzić, że był spokrewniony z Andrzejem Golimuntem.
Jego ojciec, Tabut, ani też sam Jakub Raczko nie są nam znani z innych współczesnych źródeł. Można natomiast stwierdzić, że Jakub Raczko Tabutowicz jest protoplastą rodziny Jundziłłów, którą heraldycy zaliczają do rodu Łabędziów. Albowiem w 1498 roku, Mikołaj Jundziłowicz, kuchmistrz wielki litewski królowej Heleny, namiestnik dubicki i koniawski, zeznał w jedny z dokumentów wraz ze swoimi braćmi Janem i Pawłem, że dziad ich Raczko i ojciec Jundziło dokupili różne ziemie do swych dóbr Krzemienicy i uzyskali od Wielkiego Księcia Litewskiego Aleksandra, potwierdzenie na te dobra. Z innego dokumentu króla Aleksandra dla tego Mikołaja Jundziłowicza dowiadujemy się, że ów Raczko miał jeszcze dwóch innych synów: Jana i Michnę czyli Mikołaja, który zabił swego brata Jana.
Gniazdo rodziny wywodzącej się od Raczka Tabutowicza leżało w pow. wołkowyskim, gdzie znajdujemy osadę Raczki (koło wsi Zelzina) i wspomnianą wyżej Krzemienicę.