一天，彭玉麟带着石赖叽在山顶看工程进度，见两个拿着烟袋抽烟的石匠正在休息闲聊。其中一个说这山像两口钟扣在水里，因此唤作钟山。另一个年纪稍长的说是江湖浪撞击山壁，发出像钟响一样的声音，故而叫石钟山。两人正争执不休，见彭玉麟走近，便站起来，笑着请他评判。
在从安徽回湖南时，彭玉麟就听父亲说过石钟山的来历。当时年幼并未在意，不久就忘了，后来攻打湖口才研究起此山来。他从当地老百姓口中知道，民间传说一般都以山形为之定名，而文人则倾向以声定名，在以声定名中又有两种不同的说法。北魏郦道元所作《水经注》说：“下临声潭，微风鼓浪，水石相搏，响若洪钟。”唐朝刺史李渤则说，他在“山上忽遇双石，扣而聆之，南声函胡，北声清越，枹止响腾，余韻徐歇”。他以为是因石质发声如钟，所以命名。北宋元丰七年，苏轼送他的大儿子到江西德兴县赴任，途经湖口登临石钟山时，对郦道元和李渤的不同说法产生了疑问。决定亲自考察一下，看那种说法是对的。于是，他们父子二人乘坐一只小船，出没于深潭绝壁之间，进行认真的考察。终于。他们发现绝壁下许多石头有空洞，水浪从中冲击而过，发出很大的响声，那响声很像古代的钟声。因此，苏轼认为郦道元和李渤说的都有一定的道理，但是，他们没有经过仔细的考察，就作结论未免过于简陋。