ในขณะที่หลวงปู่ครูบาขันแก้วท่านดำรงตำแหน่งเจ้าอาวาส ท่านถูกประชาชนคนอันธพาลบางพวกได้กล่าวหาอย่างร้ายแรง จนถึงกับประกาศไม่ยอมตักบาตรท่านและเมื่อพระครูโสภณธีรคุณไปเยี่ยมหลวงปู่ ท่านเห็นหลวงปู่ซื้อหม้อข้าว หม้อแกงมาตั้งไว้หน้ากุฎิ เมื่อท่านได้สอบถามหลวงปู่จึงได้คำตอบว่า
“ต่อไปชาวบ้านจะไม่ถวายบิณฑบาต จะหาเลี้ยงชีพด้วยตนเอง...”
จากคำตอบของหลวงปู่แสดงให้เห็นถึงการที่หลวงปู่ท่านเป็นผู้ที่อดทนต่ออารมณ์อันแสลงใจ สามารถระงับได้เมื่อถูกคนติฉินหรือด่าว่า...ความอดทนชนิดนี้เราเรียกกันว่า “ตีติกขาขันติ”
ว่ากันว่าความยั่วยวนต่างๆ เป็นธรรมชาติที่ทนได้ยาก
การที่หลวงปู่ท่านสามารถอดทนได้และอยู่ครองสมณเพศจนอายุท่านถึง ๗ รอบ จึงถือได้ว่าหลวงปู่ท่านบรรลุถึงคำว่า “อธิวาสขันติ”
ดังนั้น “อุดมขันติธรรม” จึงเป็นราชทินนนามที่เหมาะสมกับหลวงปู่อย่างแท้จริง....