I was with Ibrahim al-Nakhai and Ibrahim al-Taymi when I said, "I have been thinking about combining Hajj and Umrah this year."Ibrahim replied, "Had your father been alive, he would not have considered such a thing."Ibrahim al-Taymi narrated from his father, from Abu Dharr, who said, "Tamattu was something granted exclusively to us."
أخبرنا محمد بن عبد الله بن المبارك قال حدثنا يحيى بن آدم قال حدثنا مفضل بن مهلهل عن بيان
كنت مع إبراهيم النخعي وإبراهيم التيمي فقلت لقد هممت أن أجمع العام الحج والعمرة فقال إبراهيم لو كان أبوك لم يهم بذلك قال وقال إبراهيم التيمي عن أبيه عن أبي ذر قال إنما كانت المتعة لنا خاصة
Sourced as sahih. Previously mentioned at no. 2811, and it is in Kubra at no. 3794, and Muslim narrated it through the hadith of Bayan.