Also der Cache speichert serverseitig die Antwort der Amazon-Schnittstelle zwischen, d.h. die Daten müssen beim nächsten Aufruf nicht nochmal vom Amazon Server geholt werden, sondern werden aus einer lokalen Datei geladen. Gerade wenn mehrere Produkte auf einer Seite sind, wirkt sich das aus. Denn jeder Request an einen externen Server verlangsamt natürlich den Seitenaufbau.
Der Cache des Plugins hat also nichts mit clientseitigem Caching zu tun und sollte auf jeden Fall immer im produktiven Einsatz aktiviert werden.