一听别人说话就烦躁考虑可能是与正常的生理性因素有关，但是同时也可能与神经衰弱、甲状腺功能亢进症、焦虑症、抑郁症等病理性因素有关，建议患者到医院心理科、精神科、内分泌科就诊，在医生的指导下进行针对性地治疗。
一、非病理性因素：
通常情况下若日常生活中压力过大或者长期处于精神紧张、焦虑的状态下，都可能会导致机体出现生理性的应激反应，感官系统会比较敏感，因此听到声音自觉烦闷，通常通过适当休息和放松心情后，可以自行得到缓解，不用进行特殊处理。
二、病理性因素：
1、神经衰弱：通常是一种在长期紧张和高压下产生的心理疾病，通常会导致脑和躯体功能衰弱，患者可能会出现精神易兴奋、脑力易疲劳的情况，通常会对周围的声音和光线特别地敏感，因此可能会出现容易烦躁的现象，通常会伴随入睡困难、睡眠质量差等症状。患者可以在医生的指导下使用文拉法辛、氟西汀等药物进行治疗；
2、甲状腺功能亢进症：是一种因甲状腺激素产生过多而引起的临床综合征，由于身体的代谢亢进，导致交感神经兴奋，患者通常会出现消瘦、心慌、手抖、脖子粗等症状，同时在情绪方面通常会出现烦躁、容易生气等症状。患者可以在医生的指导下使用甲巯咪唑片、丙硫氧嘧啶片等抗甲状腺药物治疗；
3、焦虑症：焦虑症的发生常考虑与遗传因素、神经生化因素、心理因素等多种因素有关，患者通常会出现过度焦虑的心理体验和感受，出现莫名其妙的焦虑、恐惧、紧张、不安等症状。患者可以在医生的指导下服用丁螺环酮片等抗焦虑的药物进行治疗；
4、抑郁症：常考虑与应激性生活事件、悲观的人格特质、神经内分泌等多种因素有关，患者通常会出现心情低落、兴趣减退、焦虑、精力下降等症状，由于抑郁症患者情绪易失控，听到人说话觉得是噪音，表现为烦躁不安。患者可以在医生的指导下服用盐酸氟西汀片、盐酸舍曲林片等抗抑郁药物进行治疗。
此外，自闭症、多动症、精神分裂症也可能引起，患者可以遵医嘱根据具体的病症进行针对性的治疗，如精神分裂症，可以遵医嘱使用利培酮片、阿立哌唑片等抗精神病药进行治疗。