He was informed of Ayesha's statement that part of the Hijr belongs to the House. Ibn Umar said, "By Allah, I believe that if Ayesha truly heard this from the Messenger of Allah ﷺ, then I believe the Messenger of Allah ﷺ only refrained from touching those two corners because they are not built upon the original foundations of the House, and people only perform tawaf behind the Hijr for that very reason."
حدثنا مخلد بن خالد حدثنا عبد الرزاق أخبرنا معمر عن الزهري عن سالم
أنه أخبر بقول عائشة رضي الله عنها إن الحجر بعضه من البيت فقال ابن عمر والله إني لأظن عائشة إن كانت سمعت هذا من رسول الله ﷺ إني لأظن رسول الله ﷺ لم يترك استلامهما إلا أنهما ليسا على قواعد البيت ولا طاف الناس وراء الحجر إلا لذلك
[Sahih] Bayhaqi collected it, 5/76, through Abu Dawud's chain, and it is also in Musannaf Abdul-Razzaq, no. 8941. Its basic content is agreed upon, Bukhari, no. 4484, and Muslim, no. 1333, and Malik reported it, 1/363, 364 (Yahya's narration).