雷祖祠建于唐貞觀十六年（公元642年），迄今已有1300多年，為雷州首任刺史、雷祖陳文玉的紀念祠，現是全國重點文物保護單位。
雷祖祠系古雷陽八景之一.雷崗聳異，奉祀陳文玉。據傳，陳文玉原為雷神，奉玉帝之旨投胎下凡，解決雷州大旱。“九耳呈祥”的傳說在雷州膾炙人口。英靈村獵戶陳珙養有一只九耳犬，每次出獵前，神犬耳朵抖動幾次即可預測出獵后所獲獵物數目，百測百中。有一天，神犬在野外發現一只大石卵，獵戶抱回家后，當晚風雨雷電交加，石卵被雷電劈開，蹦出一個小男孩，這就是后來的雷祖陳文玉。
民間傳說陳文玉是一位充滿神奇色彩的英雄人物。南北朝太建二年（公元570年），陳文玉出生于雷州城南五公里之英靈村。他才華橫溢，武藝超群，剛正不阿。唐太宗聞陳文玉“性至孝”且文武雙全，于唐貞觀五年（公元631）年起用陳文玉為東合州刺史。陳文玉上任伊始，即具疏改東合州為雷州。他恩威并舉，安撫境民，發展生產，施政數年，雷州半島便寇賊遠遁且民皆富庶。陳文玉意識到雷州乃北控高涼、南通瓊涯之天南重地，為兵家必爭，遂大筑州城。城池竣工之日，陳文玉即生兩翼，白日升天。唐太宗褒贊陳文玉“養晦數十年，惡事非君”，“受職父母邦，德政彰明”。在他仙逝后，唐太宗敕封其為雷祖并立廟祀之。
雷祖祠還是明代馮夢龍《警世通言》所載的天下四絕之首“雷州換鼓”的發源地，至今還留下許許多多的神奇傳說。“雷州換鼓”已失傳，時至今日眾說紛紜：一說是自然景觀，指的是雷州半島夏季電閃雷鳴的景象；一說是人文景觀，指雷州先民舉行的規模宏大而神秘的祭雷儀式；還有一說是物件，指古代俚僚人祭雷用的青銅鼓……目前得到學術界普遍認可的說法是：“雷州換鼓”是一種人文景觀與自然景觀的完美結合，是古代雷州先民在舉行祭雷儀式過程中，出現“天人互應”，迎來電閃雷鳴、雨聚風狂的奇特景觀。
