Napisati nadaljevanje za ta odstavek - James, zdaj nekronirani kralj Škotske, je začel, kar se je izkazalo za njegovo 18-letno obdobje kot talca, medtem ko je Albany istočasno prešel s položaja poročnika na položaj guvernerja. Albany je prevzel Jamesa pod svojo kontrolo, kralju odvzel dohodek in vse znamenitosti njegovega položaja in je bil v zapisih omenjen kot "sin pokojnika kralja". Kralj je imel majhno škotsko gospodinjstvo, ki je vključevalo Henryja Sinclaira, grofa Orkneyja, Aleksandra Seatona, nečaka sira Davida Fleminga in Orkneyjevega brata Johna Sinclaira po grofovi vrnitvi v Škotsko. Sčasoma se je Jamesova hiša, ki so jo zdaj plačevali Angleži, spremenila iz visokih posameznikov v manj pomembne moške. Henrik IV. je mlademu Jakobu lepo ravnal in mu zagotovil dobro izobrazbo. James je bil idealno postavljen za opazovanje Henryevih metod kraljevanja in političnega nadzora, saj je bil verjetno sprejet v kraljevo hišo, ko je dosegel odraslost. James je uporabil osebne obiske svojih plemičev in pisma posameznikom, da bi ohranil svojo prepoznavnost v svojem kraljestvu. Henrik je umrl leta 1413, njegov sin Henrik V. pa je takoj končal Jakovovo sorazmerno svobodo, saj ga je sprva držal v Londonskem stolpu skupaj z drugimi škotskimi zaporniki. Eden od teh je bil Jamesov bratranec, Murdoch Stewart, sin Albanyja, ki je bil leta 1402 ujet v bitki pri Homildon Hill
-Kaj? Sprva sta bila ločena, od leta 1413 pa do Murdochovega izpusta leta 1415 sta bila skupaj v Toweru in na gradu Windsor.