虽然音乐能引起婴儿的反应，但有些科学家认为，给婴儿常听音乐可能有害。

如婴儿常听音乐可能养成沉默孤僻的个性，还会丧失学习语言的能力。故专家表示，在婴儿牙牙学语的年纪，父母不能每天长时间给婴儿听音乐，否则，会丧失学习语言的环境，久之，就会失去学习语言及说话的兴趣，反而养成沉默孤僻的个性。

还有人认为，婴儿不宜长时间听节奏明快、优美动听的立体声音乐。这是因为婴儿的听觉器官正处在发育阶段，鼓膜、中耳听骨以及内耳听觉细胞都很脆弱，对声波的敏感度很强，很容易发生听觉疲劳。尤其是婴儿带上立体声耳机收听音乐，由于音量较大、耳机闭塞外耳道口，立体声音乐进人耳道内没有丝毫的缓和与回旋的余地，直接刺激幼嫩的听觉器官，时间一长，就会使孩子的听力受影响。还会对孩子的身体造成危害。医学家认为，收听立体声音乐或使用立体声耳机的孩子，年龄越小，听觉器官受到的危害也就越严重。