社伝によると、建久８年（1197）源頼朝が曽我兄弟の孝心に感じ兄弟を祀らせたという。江戸時代に歌舞伎や芝居で「曽我物語」が人気となると、曽我八幡宮は曽我兄弟の木像や縁の品を江戸で出開帳した。