århundrede opdagede Algonquin Native Indianerne flere øer i New York Bay, som ikke var helt nedsænket i vand. Kun tre øer fik navnet 'Oyster Island', på grund af mængden af skaldyr, bas og østers, der findes i bay-området. De tre øer nu kendt som Ellis, Liberty og Black Tom fik navnet af New Netherland bosættere. Øen forblev en kilde til fødevareforsyning i de næste tre århundreder.