Tauschen kannst Du die natürlich gegen Riegel mit mehr RAM, aber...
1. Wie angemerkt hast Du Windows 7 in der 32bit-Varante installiert.
Damit kannst Du maximal um die 3GB RAM ansprechen, alles darüber hinaus bleibt aufgrund der Gegebenheiten der 32bit-Architektur ungenutzt. Das Problem würdest du mit der 64bit-Varante von Windows (egal, ob 7 oder 10) umgehen, aber gegebenenfalls andere Hindernisse kreieren, die dann unter Umständen die zusätzliche Menge an RAM. Ev. macht es deshalb Sinn, sogar nur einen Riegel gegen einen 2GB-Riegel auszutauschen. Ist zumindest der geringste Aufwand für etwas mehr Leistung.
2. Mehr als 4GB RAM unterstützt der verbaute Chipsatz eh nicht, wie es ausschaut.
Der Speicherausbau wäre also mit 4GB schon ausgereizt, dafür müsste dann aber auch ein neues Betriebssystem her. Ansonsten bleiben dir wie schon angemerkt nur knapp 3GB von den 4GB zur Nutzung über.
Falls Du den RAM günstig bekommst, lohnt sich der Tausch in jedem Fall. Mit 4GB RAM könntest Du dann auch nochmal über einen Wechsel zu Windows 10 nachdenken, wenn Du dir die Arbeit machen willst.
EDIT: Es ist bei dem PC völlig egal, ob die beiden Riegel dieselbe Größe haben. Mehr RAM, also z.B. auch schon nur 3GB statt den bisherigen 2GB, hat deutlich mehr Vorteile als der theoretische Leistungsverlust durch fehlendes Dualchannel beim Ansprechen des RAMs. Wir reden hier ja schließlich nicht von nem hochgezüchteten Leistungsmonster.