The Messenger of Allah ﷺ used to pray on his mount in whatever direction it faced, but when he wanted to perform an obligatory prayer, he would dismount and face the qiblah.
حدثنا مسلم بن إبراهيم قال حدثنا هشام بن أبي عبد الله قال حدثنا يحيى بن أبي كثير عن محمد بن عبد الرحمن
كان رسول الله ﷺ يصلي على راحلته حيث توجهت فإذا أراد الفريضة نزل فاستقبل القبلة