Bulugh al-Maram, Book 6, Hadith 740 (English)

A similar narration was also related by Muslim on the authority of Abu Hurairah.

وَأَصْلُهُ فِي مُسْلِمٍ مِنْ حَدِيثِ أَبِي هُرَيْرَةَ ‏- رضى الله عنه ‏- 1‏.‏ ‏1 ‏- صحيح.‏ رواه مسلم ( 1337 )‏، عن أبي هريرة، قال: خطبنا رسول الله صلى الله عليه وسلم، فقال: " أيها الناس! قد فرض الله عليكم الحج فحجوا " فقال رجل: أكل عام يا رسول الله؟ فسكت حتى قالها ثلاثا.‏ فقال رسول الله صلى الله عليه وسلم: " لو قلت: نعم.‏ لوجبت.‏ ولما استطعتم " ثم قال: " ذروني ما تركتكم.‏ فإنما هلك من كان قبلكم بكثرة سؤالهم واختلافهم على أنبيائهم.‏ فإذا أمرتكم بشيء فأتوا منه ما استطعتم.‏ وإذا نهيتكم عن شيء فدعوه ".‏

sunnah.com

also referenced under: Book 6, Hadith 14 (In-Book)