天平九年（７３７）大野東人が当郡（賀美郡）より出羽国最上郡五野へ至る道路を開発した際に社殿を造営。当初は社殿を持たず、大石を御神体として祀ったため、通称は「石上様」という。