Pendant ce temps, à bord de l’Hispaniola, le docteur Livesey, le châtelain Trelawney et le capitaine Smollett comprennent que le navire n’est plus tenable face au nombre grandissant de mutins. Le capitaine Smollett décide d’abandonner le bateau pour se replier vers un vieux fortin en bois construit autrefois sur l’île, plus facile à défendre.
Le débarquement vers le fortin se fait sous la menace directe des pirates : un premier échange de tirs éclate, faisant des blessés des deux côtés avant que le petit groupe loyal ne parvienne à s’y retrancher.
Jim, de retour de son aventure avec Ben Gunn, parvient à rejoindre ses compagnons dans le fortin, où il retrouve avec soulagement le docteur Livesey, le châtelain et le capitaine, et leur raconte sa rencontre avec Ben Gunn.
Long John Silver se présente seul au fortin, sous drapeau blanc, pour proposer un accord aux assiégés : leur laisser la vie sauve et leur céder la carte en échange du trésor. Le capitaine Smollett refuse catégoriquement toute négociation.
Furieux, les pirates lancent un assaut général contre le fortin. Le combat est violent et rapproché ; plusieurs assaillants sont tués, mais les défenseurs subissent eux aussi des pertes, dont le capitaine Smollett, blessé.
Après de lourdes pertes des deux côtés, les pirates finissent par se replier, laissant les défenseurs du fortin exsangues mais toujours maîtres des lieux, dans une atmosphère de tension et d’incertitude quant à la suite des événements.
