large-files

Große Dateien, ob Binär- oder Textdateien, können manchmal sogar für einen erfahrenen Programmierer problematisch sein. Dieses Tag sollte verwendet werden, wenn Probleme beim Öffnen und / oder Schreiben großer Dateien in einem Texteditor, beim Verwalten von Ressourcen mit Gigabyte oder bei strategischen Entscheidungen für große Datenmengen auftreten.
2
Antworten

Wie kann ich eine große Datei über CSVParser verarbeiten?

Ich habe eine große .csv -Datei (etwa 300 MB), die von einem entfernten Host gelesen und in eine Zieldatei geparst wird, aber ich muss nicht alle Zeilen in die Zieldatei kopieren. Während des Kopierens muss ich jede Zeile aus der Quelle lesen...
20.08.2015, 16:51
1
Antwort

Leistungsabfall mit fputs nach dem Schreiben von mehr als 2,5 GB. Warum?

Momentan arbeite ich an einem kleinen Programm, das große Dateien liest und sortiert. Nach einigem Benchmarking stolperte ich über ein seltsames Performance-Problem. Wenn die Eingabedatei zu groß wurde, dauerte das Schreiben der Ausgabedatei län...
10.11.2011, 08:35
1
Antwort

Sehr große Zip-Datei (50 GB) - ZipException: Ungültiger CEN-Header

Ich versuche eine ZIP-Datei in JAVA zu öffnen. Der untenstehende Code funktioniert gut, außer bei einigen großen Dateien. In diesem Fall erhalte ich die folgende Ausnahme: %Vor% Gibt es einen bekannten Fehler? Kann es an einer höheren Kom...
10.04.2012, 20:52
3
Antworten

Betrachte große XML-Dateien in Eclipse?

Ich arbeite an einem Projekt mit einigen großen XML-Dateien (von 50MB bis über 1GB) und es wäre schön, wenn ich sie in Eclipse (einfache Textansicht ist in Ordnung) sehen könnte, ohne dass Java keinen Heap-Speicher mehr hat. Ich habe versucht, d...
07.11.2009, 07:34
1
Antwort

Ist itsream :: seekg zu teuer?

Wie teuer ist es in C ++, die Operation istream :: seekg zu verwenden? EDIT: Wie viel kann ich mit der Suche nach einer Datei und Bytes lesen? Was ist mit der Frequenz gegenüber der Größe des Offsets? Ich habe eine große Datei (4 GB), die...
18.01.2014, 05:09
5
Antworten

Lesen von einer großen, kontinuierlich wachsenden Datei mit BufferedReader

Die Aufgabe besteht darin, Zeile für Zeile durch eine sehr große, kontinuierlich wachsende Datei (etwas effizient) zu lesen. Hier ist im Grunde, was ich gerade mache: %Vor% Also hängt mein BufferedReader einfach am Ende der Datei, bis mehr S...
08.07.2010, 16:59
2
Antworten

Wie kann man überwachen, welcher Teil der großen Datei geändert wurde?

Gibt es eine Lösung für Linux Kernel-3.0 (oder höher), die es ermöglicht, Benachrichtigungen zu erhalten, die ähnlich wie inotify sind und ein bestimmtes Segment der Datei beschreiben, das geändert wurde? Es gab fschange Patch für bis...
22.10.2011, 03:48
8
Antworten

schnellste Möglichkeit, die ersten X Zeilen von einer Datei in eine andere innerhalb von R zu kopieren? (plattformübergreifend)

Ich kann die Datei nicht in den RAM laden (angenommen, ein Benutzer möchte vielleicht die erste Milliarde einer Datei mit zehn Milliarden Datensätzen) hier ist meine Lösung, aber ich denke, dass es einen schnelleren Weg geben muss? Danke...
17.11.2015, 10:58