أشخص المنصور سواراً القاضي من البصرة إلى بغداد في شيء أراد أن يشافهه فيه، فمر بواسط، وفيها يحيى بن سعيد الأنصاري يتولى القضاء،فدلَّ عليه، فقال له:ألك حاجة إلى أمير المؤمنين؟ قال: نعم يعفيني من القضاء. فقال سوار للمنصور إذ قدم عليه، وكلمه فيما أراد: يا أمير المؤمنين! الأنصار تعلم ما يجب في حقهم. قال:هيه. قال: يحيى بن سعيد تعفيه من القضاء. قال:قد أعفيته.فلما انحدر سوار مرّ بواسط، فقال ليحيى بن سعيد: قد أعفاك أمير المؤمنين. فقال: لا جزاك الله خيراً عن صبية من الأنصار كانوا يقتاتون هذه الست مائة درهم في كلّ شهر. كأنه أراد أن يعرّض ولا يحقّق.