Zbójca domyślił się, że zszyty zmarły to Kasim, a właściciele domu to jego wspólnicy, którzy ich okradli. Zbójca zaznaczył kredą drzwi w domu Ali Baby i powrócił do bandy. Kiedy jednak bandyci weszli do miasta, okazało się, że nie mogą znaleźć domu. Niewolnica Mardżana, zobaczywszy znak kredą na drzwiach i tknięta złym przeczuciem, porobiła takie same znaki na wszystkich domach na ulicy, tak że zbójca zwiadowca nie był w stanie rozpoznać tego domu, który niczym się nie różnił od innych na tej ulicy. Zbójcy opuścili więc miasto, a poza miastem zabili nieudolnego zwiadowcę. Potem wysłali drugiego, który także powtórzył błąd poprzednika - został przez bandę zabity.
Wreszcie do krawca udał się sam herszt, który nie zrobił żadnych znaków na drzwiach, tylko policzył drzwi od rogu ulicy do tego domu, który wskazał krawiec. W ten sposób bandyci dowiedzieli się, gdzie mieszka Ali Baba. Postanowili zamordować go, a wraz z nim wszystkich domowników. Postanowili dokonać tego podstępem. Kupili dwadzieścia mułów i bukłaki na oliwę. Herszt przebrał się za handlarza oliwą, a zbójnicy ukryli się w bukłakach, które były założone na muły.