아타미 이마미야 신사의 역사는 오래되었으며, 쇼지 2년(1200년)에 미나모토노 요리토모의 명령으로 사전이 재건되었습니다. 이즈에 유배된 미나모토노 요리토모는 추격자를 피하여 이즈산에 들어갔으나 지쳤을 때 가까운 곳에서 물이 솟아나는 것을 발견했습니다. 물을 마신 후 힘을 얻었다고 전해집니다(요리토모의 컵 물). 그리고 다시 일어나 큰 녹나무와 신전을 보고 성공과 행운을 기원했다고 합니다. 매년 10월 19일에는 요미야제, 다음 날인 10월 20일에는 이마미야 신사 예대제가 열립니다.