Herzfrequenz im Training steigt schnell an - bitte um Tipps

Hallo zusammen, ich hätte mal gern Eure Meinungen zu meiner Herzfrequenz im Training.
Ich hab gestern das erstemal mit dem Polar H10 Sensor während des Trainings aufgezeichnet - der Sensor ist ja sehr genau.

Zu mir, ich war nie der sportlichste, bin jetzt 53 mit 177cm und 85Kg.
Ich gehe aber seit 3 Jahren 2x pro Woche zum Karate Training (das ist diese Kurve) und 1x wöchentlich zum Yoga. Zusätzlich jetzt auch seit 3 Monaten 1-2x pro Woche ins Gym für Kraft- und Kardiotraining.
Allerdings bisher noch kein länger andauerndes Kardiotraining im HF Bereich über 135 S/min - also HF Zone 3.

Was mir bisher immer zu schaffen macht ist, dass ich recht schnell "ausser Atem" bin - gut zu sehen im vergrösserten Bereich.
Die erste Stunde ist immer das freie Training zum warm werden halt. Bei 1:10h beginnt dann das eigentliche Training - halt knien, Sensei Begrüssen, Sensei erzählt etwas - da sieht man wie mein Puls sich beruhigt.
Bei 1:20 beginnt dann das Gruppentraining - das ist dann auch was anspruchsvoller.
Was aber gut zu sehen ist - mein Puls geht innerhalb weniger Minuten auf fast 170 hoch - dann mach ich ne Minute Pasue und weiter und schon gehts wieder steil hoch.

Frage daher - wie kann ich es am besten schaffen, dass mein Puls nicht so extrem reagiert.
In meinen Check-Ups beim Arzt sind alle Werte (Blut, Urin, Cardio) immer bestens - die sagen immer ich bin Kerngesund.

Müsste ich also "nur" mehr in der mittleren HF3 Zone Cardiotraining machen (um 140 S/min) - um meinen Körper daran zu gewöhnen?
Wenn ja wie lange müssen solche Einheiten dann sein - 15min - 20min - 30min - länger - am Stück ?