เมื่อถึงปรมัตถ์แล้วไม่ต้องการ
ก่อนเข้าพรรษาปี พ.ศ.๒๔๙๖ หลวงพ่อเถาะซึ่งเป็นญาติของหลวงปู่
ที่ได้ออกธุดงค์ติดตามท่านอาจารย์เทสน์ ท่านอาจารย์สาม ไปอยู่จังหวัดพังงาหลายปี
ได้กลับมาเยี่ยมนมัสการหลวงปู่ เพื่อขอศึกษาข้อปฏิบัติทางกัมมัฏฐาน
และเมื่อได้รับความรู้ในการศึกษาปฏิบัติจนเป็นที่พอใจแล้ว
หลวงพ่อเถาะได้พูดตามประสาความคุ้นเคยว่า
หลวงปู่สร้างโบสถ์ ศาลา ได้ใหญ่โตสวยงามอย่างนี้ คงจะได้บุญได้กุศลอย่างมากเลยทีเดียว
หลวงปู่ตอบว่า
"ที่เราสร้างนี่ก็เพื่อประโยชน์ส่วนรวม ประโยชน์สำหรับโลก สำหรับวัดวาศาสนาเท่านั้นแหละ
ถ้าพูดถึงเอาบุญ เราจะมาเอาบุญอะไรอย่างนี้"