وكان لابنه أبي عمر غانم ولد يكنى أبا عبد الرحمان وهو القائل في شعر له يفتخر بآله رحمهم الله تعالى:

ولينا قضاء الغرب عشرين حجة ... فعز بعدل عندنا مستلينها

وأمضى ابونا الحق في الناس فاستوت ... رعيته في العدل فاعتز دينها

فصلى عليه الله في مستقره ... وسقاه من غر السحاب هتونها

قال القاضي أبو الفضل: ودخل على ابن غانم أبو الوليد المهدي اللغوي في مرضه الذي مات فيه، فقال له رفه الله ضجعتك من هذه العلة إلى إفاقة، وراحة، وأعاد عليك ما عودك من الصحة والسلامة، فطالما صححت وعوفيت أصلحك الله فاصبر لحكم ربك، فإن الله يحب أن يشكر على نعماه. فقال ابن غانم هو الموت والغاية التي إليها نهاية الخلق وما لا بد منه فصبر يؤجر صاحبه عليه خير من ضرع لا يقي عنه ثم تمثل:

فهل من خالد أما هلكنا ... وهل بالموت يا للناس عار

وتوفى في ربيع الآخر سنة تسعين ومائة، وقيل ست وتسعين من فالج أصابه وقيل أن بصره كان قد كف والأول أصح، ويشهد له شعر حفيده قوله