纤维腺瘤大多是良性的，但也不能绝对地说一定是良性。其良恶性的判断需要综合多方面因素，如肿瘤的生长速度、形态特征、患者的症状、影像学检查结果以及病理活检等。
1. 生长速度：良性的纤维腺瘤通常生长缓慢，长期观察可能变化不大。而恶性肿瘤往往生长迅速，短时间内体积明显增大。
2. 形态特征：良性纤维腺瘤边界清晰，质地较均匀，表面光滑。恶性的则边界不清，质地不均，形态不规则。
3. 患者症状：多数良性纤维腺瘤患者无明显症状，或仅有轻微的乳房胀痛。若出现疼痛剧烈、乳头溢液等异常，需警惕恶变可能。
4. 影像学检查：通过乳腺超声、钼靶等检查，良性纤维腺瘤多表现为圆形或椭圆形的低回声结节，内部回声均匀。恶性的可能有毛刺征、血流信号丰富等特征。
5. 病理活检：这是判断纤维腺瘤良恶性的金标准。通过穿刺或手术切除组织进行病理分析，能明确肿瘤的性质。
总之，虽然纤维腺瘤多数为良性，但不能仅凭单一因素就确定其性质。患者一旦发现乳房有肿块，应及时就医，进行全面的检查和评估，以便早期诊断和治疗。