虽然音乐能引起婴儿的反应，但有些科学家认为，经常给婴儿听音乐可能有害。特别是在婴儿牙牙学语的阶段，父母不能每天长时间给婴儿听音乐，否则，孩子会丧失学习语言的环境，久之，就会失去学习语言及说话的兴趣，反而养成沉默孤僻的个性。　
　
　　还有人认为，婴儿不宜长时间听节奏明快、优美动听的立体声音乐，这是因为婴儿的听觉器官正处在发育阶段，鼓膜、中耳听骨以及内耳听觉细胞都很脆弱，对声波的敏感度很强，很容易发生听觉疲劳。尤其是婴儿戴上立体声耳机收听音乐，由于音量较大、耳机闭塞外耳道口，立体声韵进入耳道内没有丝毫的缓和与回旋的余地，直接刺激幼嫩的听觉器官，时间一长，就会使孩子的听力受影响。