Otok je21.8.1821. otkrila posadabritanskog brodaEliza Francis te ga nazvala po svom zapovjedniku, kapetanu Brownu. Nenastanjeni otok bio je anektiran od strane SAD godine1858, ali i napušten1879. nakon što su odnešene toneguanoa. Velika Britanija je anektirala otok godine1889., ali nikada nije provela dalju eksploataciju. Naslage guana su eksploatirane do kasnih1800-ih. SAD su okupirale i ponovno anektirale otok godine1935.
Tada je stvorenMillersville, naselje na zapadnoj strani otoka koje je povremeno korišteno kao meteorološka stanica od1935. dodrugog svjetskog rata, kada je napušteno; ponovno je naseljen godine1957. tokomMeđunarodne geofizičke godine od strane naučnika, ali i napušten1958.
Javnost na Otok Jarvis može doći tek uz posebnu dozvoluSlužbe za ribarstvo i divljač koju u pravilu dobijaju tek naučnici i obrazovne ustanove. Otok jednom godišnje posjećuje Služba za ribarstvo i divljač kao iObalna straža.
Na otoku nema luka ni pristaništa, ali ima vanjskih sidrišta. Postoji jedno područje za pristajanje čamaca na sredini zapadne obale te još jedno na jugozapadnom dijeluotoka. Dnevni svjetionik blizu sredine zapadne obale.
Klima je tropska, s malo padavina, stalnim vjetrom i snažnim sunčanim svjetkom. Teren, koji se od mora izdiže do najviše 7 metara je uglavnom pješčan, akoraljni otok je na rubovima okružengrebenom. Njegova gustasvežanjska trava,povijuše te nisko grmlje uglavnom služe za gniježđenje te kaohabitat morskim pticama i ostalom obliku života. Otok nema prirodnih izvorapitke vode.
