The Prophet ﷺ left me cheerful and in good spirits, then returned to me sorrowful. I said, "Messenger of Allah, you left me cheerful and in good spirits, and you have returned sorrowful."He said, "I entered the Kaabah, and I wish I had not done so. I fear that I have placed a burden upon my community after me."
حدثنا وكيع حدثنا إسماعيل بن عبد الملك عن ابن أبي مليكة
خرج النبي ﷺ من عندي وهو قرير العين طيب النفس ثم رجع إلي وهو حزين فقلت يا رسول الله إنك خرجت من عندي وأنت قرير العين طيب النفس ورجعت وأنت حزين فقال إني دخلت الكعبة ووددت أني لم أكن فعلت إني أخاف أن أكون أتعبت أمتي من بعدي
Its isnad is hasan, because of Ismail bin Abdul-Malik bin Abu Safira. The hadith was narrated by Abu Dawud 2/215 no. 2029, Tirmidhi 3/214 no. 873, who said, hasan sahih, Ibn Majah 2/1018 no. 3064, and Ibn Khuzayma 4/333 no. 3014, all of them in the chapters on Hajj and its rites.