Ich hatte das gleiche Problem!
Falls das Problem noch besteht: Lösung war hinterher wieder ein Mal sehr einfach. Öffne ein x-beliebiges Formular, gehe dann auf den Reiter "Email" und schreibe in das Feld "Absender-Name" CalderaWP
Bitte nicht vergessen: Damit die anderen Formulare auch funktionieren, muss der Eintrag muss in jedes Formular eingetragen werden.
Nachdem ich diese Eingabe vorgenommen habe, funktionierte alles wie von mir gewünscht.