قال أبو عمار الحسين بن حريث ، عن الفضل بن موسى ، قال : كان الفضيل بن عياض شاطرا يقطع الطريق بين أبيورد وسرخس ، وكان سبب توبته أنه عشق جارية ، فبينا هو يرتقي الجدران إليها ، إذ سمع تاليا يتلو ألم يأن للذين آمنوا أن تخشع قلوبهم فلما سمعها قال : بلى يا رب قد آن ، فرجع ، فآواه الليل إلى خربة فإذا فيها سابلة ، فقال بعضهم : نرحل ، وقال بعضهم : حتى [ نصبح ] فإن فضيلا على الطريق يقطع علينا .
قال : ففكرت ، وقلت : أنا أسعى بالليل في المعاصي ، وقوم من المسلمين هاهنا ، يخافوني ، وما أرى الله ساقني إليهم إلا لأرتدع ، اللهم إني قد تبت إليك ، وجعلت توبتي مجاورة البيت الحرام .