ويظهر أن صلته بقيت قائمة ببعض هؤلاء المخلوعين إلى آخر المطاف، فلقد دخل على المعتمد بن عباد ممدوحه القديم وهو في طريقه إلى منفاه بأغمات حينما حل بطنجة، وكان قد جمع له ديوان مدائحه فيه وسماه "المستحسن من الأشعار" فلم يقض بوصوله إليه إلا وهو على تلك الحال(1) .

وقد ذكر صاحب المطرب له بعض الأبيات الغزلية رواها عنه أبو القاسم خلف بن محمد بن صواب ـ الآتي ـ قال: أنشدنا إياها "المقرئ اللغوي النحوي الأديب أبو الحسن علي بن عبد الغني الفهري الحصري لنفسه بمدينة مرسية سنة 481 في جارية بيضاء(2) . فدل ذلك على أنه كان ما يزال يتردد على هذه الجهات.

وكان سقوط أشبيلية في أيدي المرابطين في يوم الأحد الثاني والعشرين لرجب من سنة 484(3). وعاش الحصري بعد هذا التاريخ نحو أربع سنوات مقيما بطنجة عاكفا على إقراء القرآن، وقد تراجع طبعه، وانقبض عن الناس، وهو ما عبر عنه ابن بسام حين قال: "ولما خلع ملوك الطوائف بأفقنا، اشتملت عليه مدينة طنجة وقد ضاق ذرعه، وتراجع طبعه"(4) .