Thema "Leistungsindex: Datenzugriff-Test Optimieren" in Technisches zu Software

Leistungsindex: Datenzugriff-Test Optimieren

Zdministrator — Fri, 16 Oct 2020 06:47:31 GMT

Hallo zusammen,

ich versuche aktuell bei einem Kanzlei herauszufinden warum der Datenzugriff-Test einfach zu langsam erfolgt.

Bei einer vergleichbaren Konfiguration erreiche ich beim Datenzugriff ~0,6-0,8 Sekunden.

Es handelt sich um eine ziemlich neue VMware 7.0 Umgebung mit 4 Hosts und Full-Flash SAN.

Der SQL-Wartungstask (WE) wird regelmäßig durchgeführt. Der SQL-Server läuft mit 64GB RAM welcher nicht mal zur hälfte ausgelastet ist.

Hat jemand noch eine Idee wo ich ansetzen könnte?

Freundliche Grüße

[ProcessorInfo]
Processor=Intel(R) Xeon(R) Gold 6146 CPU @ 3.20GHz
Description=Intel64 Family 6 Model 85 Stepping 4
MaxClockSpeed=3193
NumberOfCores=2
NumberOfLogicalProcessors=2
L2CacheSize=
L2CacheSpeed=
L3CacheSize=
L3CacheSpeed =
LoadPercentage=4

[ComputerInfo]
Name=SRVRDS00
Model=ThinkSystem SR650 -[7X06CTO1WW]-
Description=AT/AT COMPATIBLE
Manufacturer=Lenovo

SystemType=x64-based PC
TotalPhysicalMemory=12.286 MB

Leistungsindex: Datenzugriff-Test Optimieren

chrisocki — Fri, 16 Oct 2020 06:52:08 GMT

Hi,

wie sieht denn der Zugriffstest im SQL-Manager aus? Sowohl auf der Client- als auch auf der Serverseite.

Beste Grüße

Christian Ockenfels

Leistungsindex: Datenzugriff-Test Optimieren

Zdministrator — Fri, 16 Oct 2020 07:13:53 GMT

Meinen sie den Verbindungstest auf den SQL-Server?

Leistungsindex: Datenzugriff-Test Optimieren

metalposaunist — Fri, 16 Oct 2020 07:47:18 GMT

Und DATEV fühlt sich beim Kunden A auch langsamer an als bei B? All zu viel Aufmerksamkeit würde ich dem Test nicht schenken.

Wann wurde der DATEV SQL zuletzt neugestartet? Wie ist der DATEV SQL konfiguriert? Klingt eher so, als ob der nur die Hälfte an RAM belegen darf. In unserer Kanzlei sind 95% von 64GB belegt.

Microsoft SQL Server (DATEV): Maximal nutzbaren Arbeitsspeicher einstellen

Selbst wenn die Konfiguration geändert wird und der SQL danach fast allen RAM nutzt, wird es nicht viel an der Zahl ändern. Da geht es wohl eher um andere Optimierungen des SANs, Speicherbandbreiten, Verbindungen, VM Optimierungen ..., weil der Datenzugriffstest nicht oder nicht nur auf den RAM des SQL zugreift.

Leistungsindex: Datenzugriff-Test Optimieren

Gelöschter Nutzer — Fri, 16 Oct 2020 07:37:28 GMT

Eine Full-Flash-San für eine Steuerkanzlei? oder hängt da noch mehr dran?

Um wieviel Arbeitsplätze geht es?

Ich würde dem Test auch nicht viel Aufmerksamkeit schenken.. außer es läuft langsam.

Leistungsindex: Datenzugriff-Test Optimieren

einmalnoch — Fri, 16 Oct 2020 07:57:40 GMT

@Zdministrator schrieb:
Hallo zusammen,
ich versuche aktuell bei einem Kanzlei herauszufinden warum der Datenzugriff-Test einfach zu langsam erfolgt.

Bei einer vergleichbaren Konfiguration erreiche ich beim Datenzugriff ~0,6-0,8 Sekunden.

Es handelt sich um eine ziemlich neue VMware 7.0 Umgebung mit 4 Hosts und Full-Flash SAN.
Der SQL-Wartungstask (WE) wird regelmäßig durchgeführt. Der SQL-Server läuft mit 64GB RAM welcher nicht mal zur hälfte ausgelastet ist.

Hat jemand noch eine Idee wo ich ansetzen könnte?

Freundliche Grüße

[ProcessorInfo]
Processor=Intel(R) Xeon(R) Gold 6146 CPU @ 3.20GHz
Description=Intel64 Family 6 Model 85 Stepping 4
MaxClockSpeed=3193
NumberOfCores=2
NumberOfLogicalProcessors=2
L2CacheSize=
L2CacheSpeed=
L3CacheSize=
L3CacheSpeed =
LoadPercentage=4
[ComputerInfo]
Name=SRVRDS00
Model=ThinkSystem SR650 -[7X06CTO1WW]-
Description=AT/AT COMPATIBLE
Manufacturer=Lenovo
SystemType=x64-based PC
TotalPhysicalMemory=12.286 MB

Idee ja, Umsetzung wird schwierig.

Mehr Kerne, mehr Kerne, mehr Kerne.

In der DATEV Denke ist immer noch die Taktfrequenz das Maß aller Dinge, in der heutigen Zeit stimmt das aber nicht mehr. Eine intelligente Aufteilung der (virtuellen) Maschinen und das Wissen, wie bestimmte Zugriffe hardwareseitig ablaufen ist zu berücksichtigen. Windoes Server bietet zur richtigen Konfiguration eine Menge einfacher Einstellungen an.

Die meisten Server werden heute mit der Einstellung DMS = off im BIOS ausgeliefert - für den Netzwerkbetrieb eine absolute Spaßbremse, VMWare übernimmt die einfach.

Nur so nebenbei, auf einem 20Kerner (2,4GHz) mit 7.2K SAS Platten (Raid 1) wird auf VMWare 6.7 ein Datenzugriff <0,8, Festplatte <0,5 erreicht.

Leistungsindex: Datenzugriff-Test Optimieren

Zdministrator — Fri, 16 Oct 2020 07:58:35 GMT

Es handelt sich um eine große Kanzlei mit 10 Terminalservern. Vom Gefühl her müsste das System einfach alles etwas schneller laufen und der Datenzugriff-Test ist das einzige wo ich es bisher in Zahlen gesehen habe.

Leistungsindex: Datenzugriff-Test Optimieren

chrisocki — Fri, 16 Oct 2020 07:58:57 GMT

Hi,

@Zdministrator schrieb:
Meinen sie den Verbindungstest auf den SQL-Server?

Ja, im DATEV SQL-Manager.

Den können Sie nicht nur auf dem DATEV-FS sondern auch auf Clients ausführen. Wenn der Client entsprechende Zeit brauchen sollte, können Sie vielleicht hier schon was erkennen (Namensauflösung, o.ä.).

Im Dokument 1071153 sind die Wartungsscripte beschrieben. Weiter unten im Dokument wird auf die Überprüfung der Wartungen eingegangen und wie diese zu kontrollieren sind.

Wenn Sie dann in den Kontrollabfragen sind, finden Sie auch noch weitere Abfragen, die vielleicht ein wenig Licht ins Dunkel bringen:

* IO-Statistik

* Cache des SQL-Servers

* u.s.w.

Da wird aber ggf. dann auch der SQL-Support von DATEV notwendig um die Werte zu intepretieren.

Beste Grüße

Christian Ockenfels

Leistungsindex: Datenzugriff-Test Optimieren

Gelöschter Nutzer — Fri, 16 Oct 2020 08:26:19 GMT

Für eine Ferndiagnose wird es definitiv schwierig...

Der SQL müsste sich wesentlich mehr genehmigen, wenn richtig konfiguriert.

Vermutlich ist da einfach noch mehr im Argen.

Wieviele und welche Prozessoren stecken im Fileserver?

Leistungsindex: Datenzugriff-Test Optimieren

Zdministrator — Fri, 16 Oct 2020 10:22:25 GMT

Hallo, danke für das Feedback,

also der Verbindungstest ist fehlerfrei und ohne Verzögerungen, sowohl vom Client als auch direkt am Server. DNS funktioniert alles Problemlos. Auch bei der Kontrolle der SQL-Wartungsläufe konnte ich keine Probleme feststellen.

Vielleicht sollte ich wirklich mal den SQL-Support dazu holen.

Leistungsindex: Datenzugriff-Test Optimieren

Zdministrator — Fri, 16 Oct 2020 10:24:03 GMT

Die SQL-Server VM ist mit 4 vCPUs ausgestattet. (Intel(R) Xeon(R) Gold 6146 CPU @ 3.20GHz)

Leistungsindex: Datenzugriff-Test Optimieren

Gelöschter Nutzer — Fri, 16 Oct 2020 11:20:58 GMT

hat das blech 4 cpus oder der virtuelle fileserver 4 vcpus zugewiesen bekommen?

Leistungsindex: Datenzugriff-Test Optimieren

metalposaunist — Fri, 16 Oct 2020 11:25:48 GMT

@Gelöschter Nutzer schrieb:
hat das blech 4 cpus oder der virtuelle fileserver 4 vcpus zugewiesen bekommen?

@Zdministrator schrieb:
Die SQL-Server VM ist mit 4 vCPUs ausgestattet.

Ist doch alles mit gesagt.

Leistungsindex: Datenzugriff-Test Optimieren

Gelöschter Nutzer — Fri, 16 Oct 2020 11:39:52 GMT

kanns aber nicht glauben ;-)..

Leistungsindex: Datenzugriff-Test Optimieren

einmalnoch — Fri, 16 Oct 2020 11:52:02 GMT

Nur so nebenbei: Die CPU hat 12 Kerne, jetzt kommt es nur darauf an, ob 2 davon im Blech stecken.

Leistungsindex: Datenzugriff-Test Optimieren

Gelöschter Nutzer — Fri, 16 Oct 2020 12:18:31 GMT

ja.. und das ganze drumherum.

da könnte man ne rakete raus machen.

das teuerste, die flash-san, steht ja schon da.

Leistungsindex: Datenzugriff-Test Optimieren

Zdministrator — Fri, 16 Oct 2020 12:33:04 GMT

Jeder der vier Hosts hat 2 CPUs drin, also 24 Kerne pro Host (48 mit HT), das SAN ist per FibreChannel angeschlossen und das VM Netz läuft über 10GBASE-T

Sonstige Anwendungen laufen auch ganz flott aber bei DATEV der Datenzugriff macht mir einfach sorgen...

Leistungsindex: Datenzugriff-Test Optimieren

einmalnoch — Fri, 16 Oct 2020 12:42:31 GMT

Bei der Konfiguration der VM ist das offensichtlich. Meine SQL VM hat 6 Kerne abbekommen, davon darf Kern 0 nicht von SQL angefasst werden, NIC Teaming (virtuell) und Bindung auf Prozessor 0. Bevor die Besserwisser kommen, an IRQs und Offloads denken.

Im Server steckt im Übrigen auch eine 10Gb Karte.

Leistungsindex: Datenzugriff-Test Optimieren

Gelöschter Nutzer — Fri, 16 Oct 2020 15:13:57 GMT

vermutlich laufen die anwendungsstarts flott und die sql-zugriffe relativ langsam?

die datev-empfehlung ist eher richtung schnelle 2x8 core mit ht-abschaltung für 25 user und nicht 4 core in einer vm für 100 user. die san muss ja auch mal was zu tun haben.

Leistungsindex: Datenzugriff-Test Optimieren

chrisocki — Mon, 19 Oct 2020 05:42:16 GMT

Hi,

ist zwischen den Hosts noch ein Virtualisierer für das SAN, z.B. DataCore?

@All: Bei meinem alten AG haben, wir HT auch für den DATEV-SQL aktiv gelassen. Das hat zu keinem wirklichen Einbruch in der Performance geführt. Die Systeme waren insgesamt "pfeilschnell".

Beste Grüße

Christian Ockenfels

Leistungsindex: Datenzugriff-Test Optimieren

einmalnoch — Mon, 19 Oct 2020 06:50:22 GMT

Dieser Artikel hilft zu verstehen warum der SQL Server zu wenige Kerne abbekommen hat:

https://docs.microsoft.com/de-de/sql/relational-databases/thread-and-task-architecture-guide?view=sql-server-ver15

Bei den Mengen an Anfragen swappt sich die Kiste zu Tode.

Leistungsindex: Datenzugriff-Test Optimieren

Gelöschter Nutzer — Wed, 08 May 2024 20:30:32 GMT

@einmalnoch

was heisst denn DMS=off?

der zugriffstest ist bei uns auch nicht grad der brüller... 1,2 sek...

Leistungsindex: Datenzugriff-Test Optimieren

einmalnoch — Thu, 09 May 2024 10:52:16 GMT

@Gelöschter Nutzer

Tippfehler ☹️ muss DMA (Direct Memory Access) heißen. In vielen BIOS heutzutage noch vorhanden. Mit DMA können bestimmte Daten direkt, also ohne den Prozessor zu bemühen, direkt in den Arbeitsspeicher geschrieben werden.

Leistungsindex: Datenzugriff-Test Optimieren

RAHagena — Thu, 09 May 2024 15:52:22 GMT

@Zdministrator schrieb:
Hallo zusammen,
ich versuche aktuell bei einem Kanzlei herauszufinden warum der Datenzugriff-Test einfach zu langsam erfolgt.

Hat jemand noch eine Idee wo ich ansetzen könnte?

Freundliche Grüße

[ProcessorInfo]
Processor=Intel(R) Xeon(R) Gold 6146 CPU @ 3.20GHz
Description=Intel64 Family 6 Model 85 Stepping 4
MaxClockSpeed=3193
NumberOfCores=2
NumberOfLogicalProcessors=2
L2CacheSize=
L2CacheSpeed=
L3CacheSize=
L3CacheSpeed =
LoadPercentage=4
[ComputerInfo]
Name=SRVRDS00
Model=ThinkSystem SR650 -[7X06CTO1WW]-
Description=AT/AT COMPATIBLE
Manufacturer=Lenovo
SystemType=x64-based PC
TotalPhysicalMemory=12.286 MB

Der Datenzugriffs-Test läuft ja nicht nur auf dem lokalen (virtuellen) Server sondern fragt die Daten auf dem Datenserver ab. Insofern spielt hier auch noch die Netzwerkgeschwindigkeit eine Rolle, vielleicht steckt noch irgendwo eine 100er Komponente, die da etwas ausbremst. Für Testen der Netzwerkgeschwindigkeit gibts auch ein Tool. welches die Geschwindigkeit testet. Ansonsten ist es die lokale Festplatte, die die Geschwindigkeit beeinflusst. Hier kann es passieren, dass die nicht mit voller Geschwindigkeit in der VM ankommt.

Grundsätzlich schließe ich mich aber den Vorrednern dahingehend an, dass die Auswirkungen des Tests für den Anwender nicht spürbar sind. Wir haben auch einen Xeon Gold mit einem 9er Wert und zwei neue mit Ryzen 7950 und 6,irgendwas: Niemand merkt einen echten Unterschied.

Leistungsindex: Datenzugriff-Test Optimieren

siro — Fri, 10 May 2024 06:47:41 GMT

Hmmm ... 🤔

Leistungsindex: Datenzugriff-Test Optimieren

Gelöschter Nutzer — Fri, 10 May 2024 07:25:15 GMT

die geschwindigkeit liegt bei etwa 120mb/sek.. also 1000mbits.

zugriff erfolgt von nvme zu nvme.

latenz auch gut..

ich hätte schwören können, dass der irgendwann auch mal bei 0,7 lag.. aktuell aber um die 1,2sek.

naja.. verhagelt mir etwas den test.. wollte gerne runter auf 4,x.

Leistungsindex: Datenzugriff-Test Optimieren

janm — Fri, 10 May 2024 07:43:32 GMT

Wenn der Fileserver virtuell läuft und es ein Client Server Netzwerk ist, wäre ein Test, eine neue VM als Client (egal ob Server OS oder Client OS) zu installieren und dort mal den Leistungsindex zu prüfen.

Daraus sollte sich zumindest ableiten lassen, ob man in Richtung Netzwerk / Hardware oder ggfs. eher am Fileserver / Virtualisierungshost ansetzen könnte.

Leistungsindex: Datenzugriff-Test Optimieren

Gelöschter Nutzer — Fri, 10 May 2024 09:35:01 GMT

ich probiere das erstmal mit dem DMA. Vielleicht bringt das ja schon was.