Neu Geschwindigkeit Importieren von Merkmalwerten

globalmotoparts

Gut bekanntes Mitglied
3. Mai 2021
104
15
Hi Leute,

wir sind vor Kurzem auf den JTL Shop umgezogen und wollen nur die Merkmale in JTL pflegen. Da wir 60.000 Artikel (zukünftig 200.000 - 300.000) Artikel haben sind Merkmale zum Filtern im Shop essentiell. Bisher haben wir dafür auf Attribute gesetzt, diese kann man im Shop jedoch nur anzeigen und nicht zum Filtern benutzen.

Nun stoßen wir jedoch auf massive Importprobleme bei den Merkmalen. Es scheint je mehr Merkmalwerte ein Merkmal besitzt, geht die Importzeit exponentiell hoch.

Beispiele:

Merkmal 1
Anzahl Merkmalwerte: 10
Es wird immer genau 1 Merkmalwerte pro Artikel gesetzt
Zeit Import Merkmalwerte für 60.000 Artikel: 45 Minuten

Merkmale 2
Anzahl Merkmalwerte: 600
Es wird immer genau 1 Merkmalwerte pro Artikel gesetzt
Zeit Import Merkmalwerte für 60.000 Artikel: 144 Stunden
CPU Auslastung konstant bei ca 40%

Es dauert bei Merkmal 2 ca. 10 Sekunden einen einzelnen Merkmalwert zu importieren. Ich verstehe, dass hier eine Prüfung erfolgen muss, ob der Merkmalwert bereits existiert, aber kann man die Werte nicht zwischenspeichern, sodass normal schneller Import erfolgen kann? Wir arbeiten selber viel mit Datenbanken und aus technischer Sicht ergibt die Dauer der Abfrage keinen Sinn. Zumal wir die Werte extra alphabetisch sortiert haben in der CSV und immer mehrere 100 male hintereinander das gleiche Merkmal mit dem gleichen Wert importiert wird - eben nur bei einem anderen Artikel.

JTL gibt als Schwellwert für Merkmalwerte 250 an: https://guide.jtl-software.de/jtl-wawi/installation/softwarebeschraenkungen-und-grenzen/
Mit unseren 600 sind wir ja nicht allzu weit von dem Schwellwert entfernt, daher kann ich mir die Performanceprobleme nicht erklären.

Leider gibt es außer Merkmalen im JTL Shop soweit ich weiß keine Möglichkeit zu Filtern oder den Auswahlassistenten zu benutzen. Attribute funktionieren ja leider nicht als Filter.

Das gleiche Problem haben wir auch bei Merkmalen, die wir zu eBay schicken wollen. Z.B. der Teilenummern. Da existiert jeder Wert oftmals nur einmal (ist ja der Sinn einer Teilenummer) und muss extra angelegt werden. Aktuell haben wir ca. 4000 einzelne Teilenummern im System. Soweit ich weiß unterstützt JTL jedoch keine andere Möglichkeit diese Werte anders an eBay zu übermitteln. Einzige Idee, die mir hier kommt ist wieder einen weiteren Import mit der Ameise zu machen (das wäre dann Import Nr. 9 für jeden neuen Artikel), und den Import "eBay-Attribute" zu nutzen und dort die Teilenummer separat zu übermitteln.

Gibt es für diese Probleme eine gute Lösung?


Setup:

JTL Wawi 1.6.44.1
SQL Standard
12GB ECC RAM
4 Kerne
600 GB SSD
Gehostet bei ecomData
 

John

Sehr aktives Mitglied
3. März 2012
2.592
496
Berlin
Wenn Du mit solchen Mengen an Merkmalen und Merkmalwerten arbeitest, wird das evtl. auch im (JTL) Shop Probleme bereiten. Stichwort Merkmalfilter - sofern Du diese nutzt.
Da gabs in der Vergangenheit schon User, bei denen die Server unter der Last der SQL Abfragen es nicht im zeitlichen Rahmen geschafft haben.

Seitens JTL gibts auch eine Empfehlung, wie viele Merkmale/Werte man nicht überscheiten soll...
 

Enrico W.

Administrator
Mitarbeiter
27. November 2014
8.218
1.608
Die empfohlenen Grenzen sind hier aufgeführt:
https://guide.jtl-software.de/jtl-wawi/installation/softwarebeschraenkungen-und-grenzen/
Das wären 50 Merkmale und 250 Merkmalwerte pro Merkmal. Das hatte @globalmotoparts ja auch bereits geschrieben

JTL gibt als Schwellwert für Merkmalwerte 250 an: https://guide.jtl-software.de/jtl-wawi/installation/softwarebeschraenkungen-und-grenzen/
Mit unseren 600 sind wir ja nicht allzu weit von dem Schwellwert entfernt, daher kann ich mir die Performanceprobleme nicht erklären.

Das hier beschriebene Problem hat aber nichts mit der Menge der Merkmalwerte wirklich zu tun. Wie gesagt - mit Update hat sich da bereits einiges getan.
 
  • Gefällt mir
Reaktionen: globalmotoparts

Star Piercing

Sehr aktives Mitglied
1. Dezember 2012
1.185
283
Es geht ja hier auch um ein Hosting, ist denn nur die Datenbank gehostet oder die WaWi in einer Cloud?
Das bremst natürlich auch, wenn du ein Cloud Server hast und es dort direkt machen kannst ist es X-mal schneller.
 

globalmotoparts

Gut bekanntes Mitglied
3. Mai 2021
104
15
Danke für die ganzen Antworten. Habe gerade auf 1.6.47.0 upgedated und siehe da aus 144 Stunden wurden 8 Minuten. :)

Wie der JTL Shop Server nun performt müssen wir separat testen, aber hier kann man ja notfalls die Ressourcen (CPU, RAM, SSD etc.) upgraden oder die Anzahl der Filtermöglichkeiten einschränken (Mehrfachfilter etc.). Das Thema müssen wir uns dann separat anschauen.
 
  • Ich liebe es
Reaktionen: Enrico W.
Ähnliche Themen
Titel Forum Antworten Datum
Neu Geschwindigkeit der JTL Ameise JTL-Ameise - Ideen, Lob und Kritik 7
Neu Kurzbeschreibung aus mehreren Zellen importieren - möglich? User helfen Usern - Fragen zu JTL-Wawi 3
Neu Ameise - Attribute importieren/aktualisieren - Mehrere Sprachen JTL-Ameise - Ideen, Lob und Kritik 1
Neu JTL 1.8.12.0 - Artikelattribut für Shop importieren - Format CSV-Datei / Hilfe bei Import von individuellen Attributen für JTL-Shop (googlekat) JTL-Ameise - Ideen, Lob und Kritik 1
In Bearbeitung Artikel über csv-Datei bearbeiten und importieren Allgemeine Fragen zu JTL-POS 3
Neu JTL-Ameise Kontaktdaten-Export und in Greyhound importieren plus Zuweisen User helfen Usern 1
Artikelbestand in anderes Lager importieren JTL-Wawi 1.8 1
Neu Fehler SQL-Schema importieren bei Neuinstallation Installation / Updates von JTL-Shop 7
Laufende Angebote von Otto importieren ohne bestehenden Artikelbestand Otto.de - Anbindung (SCX) 1
Neu Variantenartikel mit Ameise exportieren, ändern und wieder importieren? JTL Ameise - Eigene Exporte 14
Neu Artikelname für WMS über Ameise importieren JTL-Ameise - Fehler und Bugs 6
Ebay Angebote importieren nicht möglich bitte um Hilfe ? JTL-Wawi 1.8 4
Bestand von Kinderartikeln wird im Vaterartikel zusammenaddiert JTL-Wawi 1.8 1
Neu beim Umstieg von unicorn auf SCX Bilder aktivieren Otto.de - Anbindung (SCX) 0
Neu Filtereinstellungen: wenn Sonderpreis bei Vater- oder Kindartikeln, Anzeige von Vater- UND Kindartikeln User helfen Usern - Fragen zu JTL-Wawi 5
Neu gelöst: Update von 5.3.0 auf 5.3.1 - Dateien hochgeladen - immernoch alte Version Gelöste Themen in diesem Bereich 6
Neu Fehler beim Bearbeiten von PLZ & Ort im Kundenkonto (Update 5.3.0) JTL-Shop - Fehler und Bugs 1
Neu Wechsel WAWI Hosting von JTL mit RDP auf ecomDATA User helfen Usern - Fragen zu JTL-Wawi 2
Neu Fehler bei Bearbeitung von Designvorlagen eBay-Designvorlagen - Fehler und Bugs 0
Neu Mitgabe von Nährwertangaben WooCommerce-Connector 1
Neu E-Mail-Adresse beim Versand von Lieferantenbestellungen User helfen Usern - Fragen zu JTL-Wawi 0
Neu Bilder von Merkmalen werden nicht angezeigt Gelöste Themen in diesem Bereich 5
Neu Shopify Erhöhung der Varianten von 100 auf 2000 - Connector App Problem Shopify-Connector 1
Neu Bestimmte Artikel von JTL-Search ausschließen JTL-Search 0
Artikel Netto Preis von 4 Nachkommastellen auf 2 umstellen JTL-Wawi 1.7 5
Artikelabgleich verlangsamt sich automatisch von Wawi JTL-Wawi 1.8 2
Formatierungsfehler in XML bei Verwendung von dotliquid kaufland.de - Anbindung (SCX) 2
Neu Produktfeld "Produktkategorie" von JTL nach Shopify? Shopify-Connector 0
Alternativpositionen und gültig von bis JTL-Wawi 1.8 0
Neu Fehler beim erstellen von Aufträgen. Digitale Unterschrift im Auftrag. JTL-Wawi - Fehler und Bugs 0
Export von Bestellungen als Excel JTL-Wawi 1.6 1
Neu Sortierung von Artikel nach Preis absteigend Allgemeine Fragen zu JTL-Shop 4
Ameisen Import von Aufträgen: Zahlungsziel in Tagen immer 0 JTL-Wawi 1.8 1
Neu Menüleiste wird plötzlich in der Mitte von der Seite angezeigt Allgemeine Fragen zu JTL-Shop 0
Neu 💡Umsatzsteuer- und Internationalisierungs-Expertise von unserem neuen Partner countX News, Events und Umfragen 4
Neu Update von 5.1.5 auf 5.2.4 Installation / Updates von JTL-Shop 1
EAN-Code von Umverpackungen hinterlegen JTL-Wawi 1.7 3
Neu Update von Wawi 17.15.4. auf 18.12.0 geht nicht, weil Primary voll ist JTL-Wawi - Fehler und Bugs 4
In Diskussion Fehler beim Versenden von E-Mails: "Could not convert socket to TLS" JTL-POS - Fehler und Bugs 1
Neu Error beim öffnen von Artikeln und Unterkategorien in zweiter Sprache JTL-Shop - Fehler und Bugs 1
Neu Umstieg von Shopware 5 zu JTL Shop 5 - Ranking behalten Allgemeine Fragen zu JTL-Shop 2
Neu Zusammenführen / Konsolidieren von Artikeln aus 2 Quellen (Amazon / Shopify) und zentrale Bestands-Verteilung an beide Systeme User helfen Usern - Fragen zu JTL-Wawi 0
Neu Bestände von der Wawi mit ebay abgleichen User helfen Usern - Fragen zu JTL-Wawi 2
Neu Anpassen einer Rechnungsvorlage - Bearbeiten von Textbausteinen Druck-/ E-Mail-/ Exportvorlagen in JTL-Wawi 4
Lieferant hat identischen Artikel von verschiedenen Herstellern oder verschiedene Packungsgrößen JTL-Wawi 1.7 0
Kein Fehler von 1.6.39 zu 1.8.12 JTL-Wawi 1.8 4
Verwiesen an Support wo finde ich die Logdatei von den Workflows JTL-Workflows - Fehler und Bugs 9
In Diskussion Workflow von Stornobelege Rechnung JTL-Workflows - Ideen, Lob und Kritik 1
Neu Gruppierung im Megamenü unabhängig von Kategorien Allgemeine Fragen zu JTL-Shop 0
Neu Anzeige von Neuheiten und Topsellern im JTL Shop 5 Allgemeine Fragen zu JTL-Shop 2

Ähnliche Themen