Zahlengenauigkeit ändern

' schrieb:Erzähl' mal was das für Messwerte sind und wie viele du davon hast. (Geht es zufällig noch um Vibration?) Ich hab' da so meine Zweifel, ob du da an der richtigen Stelle deiner Messkette zu manipulieren versuchst.
Gruß dimitri

Es geht ja um einen Drucksensor.
ich hab hier im Bild ein Satz von Daten eingefügt. Beim X=0,50018 z.b. ein P vom 0,086.. was eigentlich eine 0 ist. (nach der Anzeigegenauigkeit um stellung). aber bei einer kleinen X änderung z.b. letzte Data komme ich auf falsches wert 0,3....

Wenn ich die daten von Anfang an, 2 stellig oder einstellig nach der komma habe, dann wird ja die umrechnung mit der kennlinie auch passen! das ist genau das problem. bei einem X=0.5 will ich auf der anzeig überall 0 haben! nicht diese komische negative Werte! Die Kennlinie habe ich auf auf FP.

was sagst du dazu oder en Vorschlag ?
wobei ich will nur die Messwertegenauigkeit ändern. D.h. beim Dynamik Data sollte t_0 und dt unverändert bleiben. Nur X werte.

danke & Grüße,

P.S. Sorry für die schlechte Formulierung!