Office: 4 Mio. Daten, aber nur 1 Mio. Zeilen

Hallo zusammen,

leider weiß ch nicht, ob es hierfür eine Lösung gibt, bzw. wonach ich googeln könnte:

Ich habe für 1000 Produkte (Spalten) jeweils 4000 Daten (Tagespreise über 4000 Tage, Zeilen). Meine Aufgabe ist es, über ein Makro alle Preise untereinander zu sortieren, sprich die ersten 4000 Preise zu Produkt A, darunter 4000 Preise für Produkt B, usw.... In die Spalte daneben kommt die Produktbezeichnung und daneben das Datum (den Code habe ich). Allerdings lässt Excel "nur" ca. 1 Mio Zeilen zu.

Später sollen diese Auswertung in Access geladen werden, um dort weiterverarbeitet zu werden (am Besten per Makro aus Excel in Access direkt exportieren).

Wie könnte ich jetzt vorgehen? Mehrere Tabellenblätter füllen und dann versuchen, die Daten in Access anzureihen?

Hilfe

Danke im Voraus.

:)

 

Hallo,

in der Tabelle gibt es diese Begrenzung, aber in PowerQuery, Arrays und Einlesen mir "OPEN file" und speichern in mehreren Spalten/ Blätter kann man auch mehr als 1 Mio Zeilen verarbeiten.

Was am besten ist, hängt von den Details und den Kenntnissen ab.

mfg

 

Kannst ja so etwas versuchen ...
Habe ich auch noch nie gemacht, berichte mal...

Ansonsten ist das natürlich eine klassische Aufgabe für ein Datenbanksytem wie Access oder MariaDB.

 

Auf den ersten Blick sieht Power Query/ power pivot nach einem Ansatz aus. Ich müsste es nur irgendwie hinbekommen, die Makro-Ausführung nicht in Excel laufen zu lassen, wie es bisher ist, sondern, dass er die Daten zwar aus meiner Ursprungstabelle liest, das Makro ausführt und das Ergebnis in der PowerPivot speichert. Auf den ersten Blick sieht es so aus, als ob ich dort nur normale SQL Befehle und Sortierungen vornehmen kann.

 

Update: Habe eine Test-Mappe erstellt mit zwei Tabellenblätter, bei der jede mit der maximalen Anzahl an Zeilen befüllt ist. Bei der Zusammenführung über Power Pivot kommt bei Überschreitung der max. Anzahl wieder eine Fehlermeldung. *frown.gif*

 

Jet-SQL, das von Access bzw. normal auch in anderen Officeprogrammen verwendet wird, kann in einer Tabelle/Abfrage nur jeweils maximal 255 Spalten verwalten und verarbeiten. Das betrifft dann gleichlautend auch Exporte in eine Access-DB. Also müsstest Du Deine Tabelle in einem ersten Schritt vertikal teilen, so dass Du in jedem entstehenden Arbeitsblatt die Datumsspalte sowie weniger als 255 Produktspalten hast. Die real zu verwendende Spaltenzahl sollte mit der maximalen Zeilenzahl in Excel korrespondieren.

Im Anschluss wäre ein Unpivot der Teiltabellen über PowerQuery sinnvoll, per VBA-Script könnte man das auch lösen, ist aber umständlicher. Es sollten also drei Spalten entstehen: Datum, Produktname bzw. -schlüssel, Wert

Im dritten Schritt könnte man dann die Ergebnisse des zweiten Schrittes mit einer Anfügeabfrage pro Blatt in die Ziel-Datenbanktabelle übertragen.

Die ersten beiden Schritte könnte man im Handbetrieb erledigen (natürlich dann auch zu programmieren, falls Wiederholungsfälle drohen), für den dritten wäre bei Ausführung aus Excel heraus eine kleine Routine nötig. Ein alternativer Import von Access aus könnte auch im Handbetrieb erfolgen.

 

Wie deutet man die Sprachlosigkeit von mp4711?

War da schon eine Lösung dabei?
Muss er/sie noch überlegen?
Gab es die Erkenntnis, besser gleich das Handtuch zu werfen?

 

Er/Sie liegt noch im Koma... ;-)

Letzte Aktivität von mp4711: 28.10.2017 20:15h

Deine tiefgründigen (!) Erläuterungen hat Er/Sie noch gar nicht registriert...