吳耀輝在圍村長大，10多歲才遷出，保留了較多傳統觀念。他認為現時祠堂猶存，自己屬於吳氏這條血脈，太公終歸是太公，他希望氏族一直延續下去，在他這一代(即廿八世孫)失傳會很可惜，不過廿九世的後人已不感興趣。他小時對祖宗的事有興趣，可惜每次向父親提問都被責怪多事。年輕時對承傳祖先的想法沒有濃厚興趣，自從家人移民加拿大後，獨留他一家在香港，才逐漸產生承傳祖先的想法。他希望下一代有相似的想法，不過他不會刻意向後人灌輸，只帶兒子出席族中活動，希望有潛移默化的作用。