阴唇两旁肿胀有痛感，但是不痒，考虑应该是炎症刺激导致的，建议你最好去医院做一下白带常规检查，明确是什么类型的阴道炎，然后再对症用药比较好。你现在可以每天用温水清洗外阴，碘伏消毒，然后涂抹红霉素软膏，如果不见好转及时去医院就诊。