台北縣《新店市志》載：新店安民街近及人中學處，有一吳氏族人之宗祠號曰「永思堂」，其族之祖籍為福建省漳州府平和縣，取名永思堂，是為了紀念其先祖艱苦的奮鬥，原本永思堂原建在廣東省潮州府饒平縣埔平寨（注：即今上饒鎮埔坪）一株梅樹下，當時由於群居之族人眾多，宛如一個巨型的家族城寨一般。時值明朝末年，國家動盪不安，有一流寇余秉仁聚眾攻寨，吳氏族人拒戰匝月，卻因為祖宗忌辰一時群飲失守，閤族罹難者多不勝數。故後代子孫相傳至今，乃不與余姓人士通婚。

而永思堂為逸觀公所居，公生二子，長子為正直公，於明朝末年遷入福建遂為開漳之祖，稱為一世祖。至六世祖樸厚公生五子，長子廷陞在和邑，其餘皆渡海來臺，次子廷實為原住民所殺；三子廷意住彰化、嘉義處未知絕續；五子廷在無娶；唯四子廷祿公在淡水廳拳山堡大坪林十四張庄開闢土地為渡臺開基主。