Neu Bestandsupdate über Datenbank

[B M S]

Hallo liebes JTL Team,

hätte da ein explizites anliegen.

Wir bekommen von fast jedem Lieferanten/Großhändler/Hersteller CSV Listen, die wir per FTP abrufen, mit den Ihrem bestellbaren Bestand, diesen spiegeln wir wieder auf unserem Webshop (mit etwas längerer Lieferzeit als die anderen Artikel die wir direkt vor Ort haben).

Gibt es eine Möglichkeit dies auch in der Wawi zu realisieren (d.h. das diese Listen 2 - 3 mal pro Tag gezogen werden und in die Wawi eingespielt werden zusätzlich zu unserem "Vorrotbestand").

Habe das in unserem Webshop immer direkt per Script über die Datenbank erledigt, wäre das bei der Wawi auch möglich.. (das ich ZB den Bestand in den Varkombis update, mit den CSV Listen.... diese dann zusammenzähle und den "Vater" damit update)

Grüße
Martin
BMS - Team

 

[maydo]

Mit der Ameise kannst du das automatisieren.

https://guide.jtl-software.de/jtl/Kategorie:JTL-Ameise:Automatischer-Import-via-FTP

 

[B M S]

Ja das hatte ich auch gesehen und ausprobiert, würde aber bei uns nicht in Frage kommen da das Stunden dauern würde bis die alles durch hat.....
Mein Datenbankscript hat inklusive Download vll 20sec gedauert

 

[B M S]

Hat sonst niemand eine Idee? Was sagt den das JTL-Team dazu? Ihr müßtet das ja eigentlich am besten Wissen.

 

[maydo]

wieviel artikel wollt ihr updaten ?

 

[B M S]

so ca 50tsd werden es schon sein (mit Varianten)...

 

[astuparek]

Hallo,
für solche Zwecke haben wir unser Tool connect entwickelt. Aktuell schließen wir auch ne neue JTL-Wawi-Schnittstelle ab, die um einiges performanter arbeiten wird als die Ameise.
SQL-Scripts in die Datenbank feuern geht auch jetzt schon!
connect basiert auf einer " Workflow-Struktur" mit der man genau deinen Bedarf abdecken kann.
z.B. "Download der Daten vom FTP des Lieferanten (per Zeitplan gesteuert, auch mehrmals täglich) -> einlesen der Daten in connect -> umwandeln der Daten zu fertigen Scripts (per Lieferantenzeile -> direkte Übergabe an die Datenbank"
und natürlich läuft das Ganze dann vollautomatisch, sobald der Workflow eingerichtet ist.

Gerne können wir mit unserem Vertrieb auch einen Live-Demo-Termin ausmachen, dann siehst du connect in Aktion

 

[B M S]

Das klingt ganz gut!
Aber eigentlich brauch ich nur ein wenig Hilfestellung, wo was in der Datenbank gespeichert ist (varianten und papas)..
und ob ich das so einfach machen kann/darf oder ob dann die Wawi sauer wird wenn ich einfach per sql Datenbestände ändere...
war ja schon die ganze Zeit im Connector Forum unterwegs... und Daniel hat mich dan hierhin geschickt...

 

[astuparek]

Grundsätzlich gilt immer, und das wird dir jeder SP empfehlen, nicht selbst Änderungen an der Datenbank durchzuführen - es sei denn, du weißt ganz genau (!) was du tust! Auch bei Lagerbeständen kannst du dir schnell viel zusammenhauen.

 

[B M S]

ja die Verknüpfungen im Webshop waren da halt ganz einfach Das das hier ein wenig komplizierter ist hab ich mir schon gedacht Also müßt ich noch Lagerbuchungen rein SQL len...
Mein Problem ist halt, das ich mich mit der Wawi noch garnicht auskenne.. und erst recht nicht mit Ihrer riesigen Datenbank.. und im gegensatz zu SQL ist MYSQL ja auch viel übersichtlicher... oder ich bin es einfach gewöhnt..

 

[B M S]

Schauen in diesen Teil des Forums eigentlich auch JTL Mitarbeiter rein?

 

[gre000]

Schauen in diesen Teil des Forums eigentlich auch JTL Mitarbeiter rein?

Hin und wieder.
Aber von JTL wirst du nur so etwas in der Art hören:
"Wir können von externen eingriffen nur dringend abraten und können für extern veränderte Datenbanken keinen Support übernehmen"

Mein Problem ist halt, das ich mich mit der Wawi noch garnicht auskenne.. und erst recht nicht mit Ihrer riesigen Datenbank..

Dann ganz klar Finger weg von der WawiDB.
Wie lange braucht die Ameise denn per QuickSync?

 

[B M S]

ja dessen bin ich mir bewußt!
Na dann Try und Error ich halt ein wenig... werde da was schönes basteln.. ne Woche hab ich ja noch

Die Ameise hat für eine kleine Datei schon ein paar Minuten gebraucht (die hatte so 3000 Zeilen) nach der Anleitung - Kategorie:JTL-Ameise:Automatischer-Import-via-FTP
Wir haben aber auch welche mit 50000 Zeilen.. da dauerts bestimmt ne halbe Std. oder länger (hab ich aber nicht getestet) und insg. haben wir vll. 10 solcher Dateien..
Oder ist QuickSync was anderes?

 

[astuparek]

Try and Error ist gefährlich und zeitaufwändig.
Die Ameise ist kein Performance-Wunder, das liegt aber auch daran, dass bei den unterschiedlichen Import-Methoden auch Überprüfungen usw. stattfinden. Beim QuickSync werden davon weniger ausgeführt, als beim Artikeldaten-Import (zudem sind es andere Scripts die ablaufen), weshalb dieser bei reinen Preis und Lagerstandsupdates schneller ist. Es stehen dir aber nicht alle Felder zur Verfügung.

Wie gesagt, mit connect könntest du das alles automatisieren (mit sicher besserer Performance) ohne einzelne Batch-Scripts für den Download und den Import zu basteln und ne extra Aufgabe im Aufgabenplaner zu hinterlegen. Hier wäre alles an einem Ort

 

[ag-websolutions.de]

Denke auch dran die Entwicklung der wawi ist in vollem Tempo

Was heute noch mit t&e klappt. Kann morgen schon wieder hinfällig sein

Was stört daran wenn die ameise ne Stunde braucht?

 

[astuparek]

Denke auch dran die Entwicklung der wawi ist in vollem Tempo

Was heute noch mit t&e klappt. Kann morgen schon wieder hinfällig sein

Was stört daran wenn die ameise ne Stunde braucht?

Bin voll bei ag-websolutions.de, was die Entwicklung und die potentiellen Änderungen in der Datenbank angeht.

Zum Beispiel kann es bei Dropshippern schon interessant sein, dass die Bestände mehrmals täglich bei mehreren Lieferanten (oft stündlich) aktualisiert werden sollen. Da kann es schon mühsam werden, wenn die Ameise oder der Import viel Zeit in Anspruch nimmt.

 

[B M S]

genau....Ne STD wär ja noch zu verkraften.. glaube aber das das wohl viel länger dauern wird! Und das kann man dann in der heutigen Zeit nicht akzeptieren

Was ist den dieser QUicksync und wo finde ich den?

 

[astuparek]

Den QuickSync findest du in der Ameise bei den Imports (Preise und Bestände QuickSync).
Da kannst du die Performance mal messen. Wenn du willst kannst du uns auch mal deine Liste schicken, dann lassen wir das mal durch unsere neue Schnittstelle laufen (die ist gerade in der finalen Testphase), dann kann ich dir nen Benchmark-Vergleich geben.


Gesendet von iPhone mit Tapatalk Pro

 

[B M S]

Alles klar, besten Dank auch..werde mich gegebenenfalls wegen der Liste melde..

 

[maydo]

mit viel automatik und optimierungen ist dein vorhaben durchaus mit der automeise möglich.

wir updaten ca. 35k artikel 8x per tag (4 lieferanten mit mehreren listen pro lief.), es laufen immer irgendwelche importe/exporte
bei 50k artikeln sehe ich da auch keine probleme, erst bei >100k würde ich mir eine direkte datenbanklösung überlegen wollen.

befasse dich mit der batch ameise und batch > windows aufgabenverwaltung.
du wirst zum ziel kommen.
eine pauschale lösung wird dir hier keiner präsentieren können, da dein vorhaben viel zu individuell ist.

ftp download kannst du auch automatisieren, würde dir aber eher zu wget & wput raten.
installiere dir am besten einen lokalen webserver. um die dateien abzuholen, automatisiert bearbeiten usw.

und noch ne empfehlung, falls es mehr artikeln werden sollten.

lief csv listen > import & matching in eine externe mysql datenbank
in der mysql datenbank werden die artikel gematch und aus dieser datenbank kannst du dir einen einzigen import für deine wawi zusammenstellen.
so sparst du dir zig einzelne im/exports der ameise