حجرالاسود در طول تاریخ مورد حملههای متعددی قرار گرفت و افراد بسیار قصد تخریب یا دزدیدن آن را داشتهاند در ذیالحجه سال ۳۱۷ هجری قرمطیان در زمان موسوم حج به مکه هجوم بردند و حین طواف هزارهفتصد حاجی را حین طواف کعبه کشتند و حجر الاسود را از کعبه جدا کردند و به سرزمین خود، احساء بحرین بردند و آن سنگ مدت بیست و دو سال در یک خانه نصب بود تا اینکه در سال ۳۳۹ در زمان حکومت المطیع لله عباسی با وساطت ابوعلی علوی، حجرالاسود را که اکنون شکسته بود به مکه منتقل کرده و آنگاه در جایگاه کنونی آن در کعبه نصب کردند.
حجرالاسود اکنون شامل ۸ قطعه کوچک بوده که بزرگترین آنها اندازه یک خرما بوده که در درون ملات سیمانی(به رنگ قهوه ای) قرار دارند . قطعات این سنگ در محفظهای از نقره قرار داده شده است.
در مورد منشا شهاب سنگ بودن این سنگ مقدس مسلمانان ابهاماتی وجود دارد.