村上天皇、大內正恆在高鹿垣山上修建了上宮。1870年時，隨著日本的神佛分離運動而將其正殿更名為「降松神社」。神社由上宮、中宮、若宮3棟建築組成，分別座落在鷲頭山山頂、山腰及山腳。