漢人在觀音鄉的拓墾，最早可推至雍正年間（依各氏族譜載知），自乾隆中葉起，入墾的漢人便迅速增加。
在閩、客的比例上，客籍顯然比閩籍為多。
整體的比較上，客家人的宗族組織發展比福佬人嚴密，向心力、凝聚力也強。
雍正十年（1732）粵籍陸豐人徐錦宗入墾茄苳坑（保庄村地區），為客家人在此地開闢之始，
乾隆、嘉慶、道光年間，客家人尚不斷來此墾拓。
由於歷史因素客、閩族群先後來到本鄉墾拓，閩南人經由北部許厝港、大園進入觀音鄉；
而客家人則由紅毛港、新竹地區往北遷移，於是，形成了「觀音」客語區、「草漯」閩南語區和「新坡」閩南語言混合區等，
三個因不同語言使用區域，而發展出各俱特色的地方人文風貌。
觀音地區包括觀音村、大潭村、武威村、保生村、三和村、新興村、坑尾村、白玉材、廣興村等九村。
觀音指本地高處，咸豐十年竹北二堡石牌岭莊（今屬新屋鄉）農民黃某，往返耕作途中在此處小溪中，
拾得一天燃石酷似觀音佛，供奉瞻拜，稱為石觀音，自此莊名亦稱石觀音。
後有白沙墩莊貢生黃雲中等倡建寺廟，稱為福龍寺。光緒二十一年居民復在寺旁發現湧泉，方可治百病，其味清洌，
稱為甘泉井，寺亦易名甘泉寺。此寺香火鼎盛，逐成為觀音市街發展之中心。
觀音鄉新坡下徐姓來台祖係原籍廣東省惠州府陸豐縣三溪鄉四旗田 ; 蕭甲公始祖派下宗達公之次子子貴公，
第十二世祖子貴公，於清朝中葉年間，約為1751年左右渡海來台，在滬尾（今淡水）港登陸後 . 落腳桃園縣觀音
沿海地區（即今白沙岬燈塔附近），墾荒闢地建立家園，繁衍後代子孫。
該祭祀公業團體世世代代共推管理人，處理親族之相關事宜，於民國七十六年始正式成立管理委員會，
首屆由徐榮鑑擔任主任委員，徐富榮擔任總幹事。
今祖塔位於桃園縣觀音鄉沿海之白沙岬燈塔入口旁，原係安置來台祖子貴公金骸之處，
為一天然勝地，名曰「金鵝孵卵」吉穴，
民國卅七年農曆十二月十二日由徐平、徐看等先祖領導修建完成。
歷經數十寒暑，外貌逐漸老舊破損且倉容有限 , 而於民國七十九年由管理委員會發起募款擴建完成至今。
管委會為長久之計，於八十九年間依政府法令申請，完成法人設立登記，名為「財團法人徐子貴祭祀公業」。
由徐永明擔任首屆董事長，是觀音地區第一個成立財團法人的家族。
鄰近之歷史建築－徐氏公聽東海堂，
則為早年先祖遺留之土造房屋，民國58年時裔孫曾加以整修。
「東海堂」建築方位座東朝西向，建築基地選在桃園台地邊緣陡下海岸的土丘坡腳。
背後土丘靠背，前面有一條水圳流過，雖構不成錦帶水環腰的絕佳風水地理條件，但堂前視野寬闊的田野直達海邊，
明堂遼闊清爽，應該也是個相當良好的居住環境。
正廳作退凹處理，二側橫屋則無，正廳門額上有燦金的「東海堂」堂號額匾，
屋基抬高二階，牆基使用洗石收邊裝飾，退凹處牆面與墀頭下均作櫃檯腳樣式，以求牆面之視覺變化效果，
正身牆面內為泥磚，外以平砌磚牆作秀面，外圍採用大量的彩色瓷磚作為裝飾素材。
原本是古樸的風貌 ,
不過據說已於不久前改建成嶄新的宗祠……..
聚落裡還有數棟三合院古厝 , 沿著山崙橫艮一路 ; 從快速道路方向眺望 , 聚落還頗有規模 ;
離開觀音往南向塘背的路旁 , 有一棟日治時期的民居房舍 , 造型特殊 ;
據說這也是徐家的產業 ; 聽說還曾經作為宗親會使用的空間 …….
可惜, 也呈現出其不堪歲月摧殘 , 瓦傾牆圮 , 荒廢的一面 ;
不知是否有修復的意願 ?
