وقبض عليه، وانتزع ما كان بيده وأمره باستجلاب ماله فأحضره وأخرجه من فاس وولي فاسا عامل مصالة. وانفصل مصالة من الغرب، وبقي موسى ابن أبي العافية في الغرب أميرا.
ثم قام حسن بن محمد سنة ٣١٠، وهو حسن بن محمد بن القاسم بن إدريس بن إدريس، الملقب بالحجام، فأوقع بموسى بن أبي العافية. وكان بينه وبين رؤساء القبائل وقعة شنيعة، لم يكن بالغرب بعد دخول إدريس الكبير مثلها، قتل فيها من البربر نحو ألفي قتيل، وقتل لموسى في جملتهم ولد يسمى منهل. وملك حين هذا فاسا وما يليها نحو سنتين. ثم قام عليه أهل فاس، وغدروه وقدموا حامد بن حمدان الهمداني، وكان يعرف باللوزي، وهي قرية بإفريقية نسب إليها تسمى لوزة. فأخذ حامد حسن بن محمد، وسجنه وأرسل إلى موسى بن أبي العافية فأتاه بجيوشه ودخل فاسا وتغلب عليها وأراد قتل حسن لأجل أبنه منهل الذي كان السبب في قتله، فدافعه حامد عنه، وكره المجاهرة بقتله ثم سم بعد ذلك، وقيل: أخرجه حامد على السور فسقط عنه وانكسرت رجله ووصل إلى عدوة الأندلسيين فمات بها رحمه الله؟!.
واستولى موسى بن أبي العافية على ملك فاس وبلاد الغرب بعد موت حسن الحجام. وسمي بذلك لأنه حارب بني عمه فضرب رجلا بحربة صادف بها موضع الحجم، ثم صادف ضربة أخرى لشخص أخر في موضع المحاجم ايضا، وكذلك ثالثة. فقال ابن عمه أحمد: (صار ابن عمي حجاما) فسمي بذلك حجاما.
ومن قوله طويل:
وسميت حجاما ولست بحجام ... ولكن لضربي في مكان المحاجم
ولما استولى ابن أبي العافية على فاس قتل عبد الله بن ثعلبة بن محارب