Sembrava essere esattamente ciò che ci si aspettava da lui: un giovane schiavo che trascorreva le giornate lavorando e le notti dormendo. I soldati pattugliarono le foreste, non trovarono nulla di sospetto e si ritirarono in ottobre, dichiarando la zona sicura. Due giorni dopo la partenza dei soldati, Isaiah uccise altri due cacciatori di schiavi. Stesso metodo: pietre in testa, in silenzio, invisibile, spariti prima che i corpi venissero ritrovati.
Questo schema si ripeté nel 1853 e nel 1854. Isaiah uccideva sempre più lentamente, una vittima ogni due o tre mesi, per un totale di venti. Alla fine del 1854 aveva diciotto anni. Aveva trascorso tre anni rendendo la contea di Cherokee praticamente inaccessibile ai cacciatori di schiavi. Gli schiavi fuggiti iniziarono a usare la contea di Cherokee come corridoio sicuro. La voce si diffuse attraverso la Underground Railroad: la Georgia settentrionale, e in particolare la contea di Cherokee, era un luogo in cui i cacciatori di schiavi non osavano andare.
Il fantasma, come ormai lo chiamavano, aveva creato una zona di sterminio dove i cacciatori diventavano le prede, dove le persone ridotte in schiavitù potevano muoversi in relativa sicurezza perché gli uomini pagati per catturarle erano troppo spaventati per entrare. Ma la campagna di Isaiah non fu priva di momenti di pericolo. Nel marzo del 1854, un cacciatore di schiavi di nome William Brooks arrivò a meno di sei metri dal nascondiglio di Isaiah su un albero.
Brooks se ne stava proprio sotto la quercia dove Isaiah si nascondeva, lasciando riposare i suoi cani, completamente ignaro che il suo assassino si trovasse a tre metri sopra la sua testa. La fionda di Isaiah era carica. Una pietra pronta. Avrebbe potuto uccidere Brooks con facilità. A bruciapelo. Impossibile mancare il bersaglio. Ma Isaiah non sparò. Troppo vicino. Troppo rischioso.
Se il colpo non fosse stato fatale all'istante, se Brooks avesse avuto il tempo di alzare lo sguardo e vederlo prima di morire, Brooks avrebbe potuto gridare, avrebbe potuto identificarlo. E se Brooks avesse identificato Isaiah come una persona ridotta in schiavitù, gli investigatori avrebbero interrogato ogni persona ridotta in schiavitù nella contea. Alla fine lo avrebbero rintracciato nella piantagione di Morrison. Tutti lì sarebbero stati torturati finché qualcuno non avesse rivelato le attività notturne di Isaiah.
Così Isaiah rimase immobile sull'albero, quasi senza respirare, mentre Brooks gli sedeva proprio sotto per quasi un'ora. I muscoli di Isaiah si irrigidirono. Gli doleva la schiena. Aveva un disperato bisogno di cambiare posizione, ma non riusciva a muoversi nemmeno di un millimetro. Brooks fumava la pipa, parlava con i suoi cani, mangiava qualcosa, si sdraiava a terra e sonnecchiava per ben 20 minuti.