江戸時代から船舶の寄港地として繁栄し、函館港とともに日本最初の開港となりました。１８５４年に締結された日米和親条約により開港とされ、外国船へ薪炭・食糧・水を供給する補給基地港となりました。伊豆七島への定期船や遊覧船が発着しています。