Die obengenannte Lösung hat bei mir nicht funktioniert. Dafür habe ich eine andere gefunden, die bei mir tatsächlich funktioniert. Im Customizer unter "Zusätzliches CSS" folgendes Skript hinzufügen (Color-Code nach Deinen Befürfnissen anpassen):
p.woocommerce-store-notice.demo_store {
background-color: #000000;
color: #ffffff;
}
a.woocommerce-store-notice__dismiss-link {
color: #ffffff !important;
}