


Wie lese ich die letzten 10 Zeilen einer 10-GB-Textdatei in C# effizient?
Dec 29, 2024 am 02:03 AMAbrufen der letzten 10 Zeilen umfangreicher Textdateien (über 10 GB)
Im Bereich der Textverarbeitung besteht eine h?ufige Herausforderung darin, die zu extrahieren letzten paar Zeilen extrem gro?er Textdateien. Beim Umgang mit Dateien mit mehr als 10 GB k?nnen herk?mmliche Ans?tze nicht ausreichen. Dieser Artikel stellt eine effektive L?sung für dieses Problem mit C# vor und bietet einen Codeausschnitt zur Demonstration der Implementierung.
Um die letzten 10 Zeilen effizient abzurufen, besteht die Strategie darin, die Datei vom Ende rückw?rts zu durchlaufen. Da die Anzahl der Zeilen variabel sein kann, suchen wir iterativ rückw?rts, bis wir auf 10 Zeilenumbrüche sto?en. Sobald dieser Punkt erreicht ist, lesen wir den verbleibenden Inhalt weiter, um die letzten 10 Zeilen zu erfassen.
Betrachten Sie die folgende Implementierung:
public static string ReadEndTokens(string path, Int64 numberOfTokens, Encoding encoding, string tokenSeparator) { int sizeOfChar = encoding.GetByteCount("\n"); byte[] buffer = encoding.GetBytes(tokenSeparator); using (FileStream fs = new FileStream(path, FileMode.Open)) { Int64 tokenCount = 0; Int64 endPosition = fs.Length / sizeOfChar; for (Int64 position = sizeOfChar; position < endPosition; position += sizeOfChar) { fs.Seek(-position, SeekOrigin.End); fs.Read(buffer, 0, buffer.Length); if (encoding.GetString(buffer) == tokenSeparator) { tokenCount++; if (tokenCount == numberOfTokens) { byte[] returnBuffer = new byte[fs.Length - fs.Position]; fs.Read(returnBuffer, 0, returnBuffer.Length); return encoding.GetString(returnBuffer); } } } // handle case where number of tokens in file is less than numberOfTokens fs.Seek(0, SeekOrigin.Begin); buffer = new byte[fs.Length]; fs.Read(buffer, 0, buffer.Length); return encoding.GetString(buffer); } }
Dieser Code behandelt F?lle, in denen die Anzahl der Zeilen im Datei ist kleiner als 10 und passt den Lesevorgang entsprechend an. Der Kodierungsparameter erm?glicht eine Anpassung basierend auf der Kodierung der Datei, und tokenSeparator kann verwendet werden, um die letzten aufeinanderfolgenden Elemente eines anderen Trennzeichens abzurufen.
Mit diesem Ansatz k?nnen Sie effektiv die letzten 10 Zeilen umfangreichen Texts abrufen Dateien, wodurch eine effiziente Verarbeitung und genaue Ergebnisse gew?hrleistet werden.
Das obige ist der detaillierte Inhalt vonWie lese ich die letzten 10 Zeilen einer 10-GB-Textdatei in C# effizient?. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Hei?e KI -Werkzeuge

Undress AI Tool
Ausziehbilder kostenlos

Undresser.AI Undress
KI-gestützte App zum Erstellen realistischer Aktfotos

AI Clothes Remover
Online-KI-Tool zum Entfernen von Kleidung aus Fotos.

Clothoff.io
KI-Kleiderentferner

Video Face Swap
Tauschen Sie Gesichter in jedem Video mühelos mit unserem v?llig kostenlosen KI-Gesichtstausch-Tool aus!

Hei?er Artikel

Hei?e Werkzeuge

Notepad++7.3.1
Einfach zu bedienender und kostenloser Code-Editor

SublimeText3 chinesische Version
Chinesische Version, sehr einfach zu bedienen

Senden Sie Studio 13.0.1
Leistungsstarke integrierte PHP-Entwicklungsumgebung

Dreamweaver CS6
Visuelle Webentwicklungstools

SublimeText3 Mac-Version
Codebearbeitungssoftware auf Gottesniveau (SublimeText3)

Hei?e Themen





STD :: CHRONO wird in C verwendet, um die Zeit zu verarbeiten, einschlie?lich des Erhaltens der aktuellen Zeit, der Messung der Ausführungszeit, der Betriebszeit und -dauer und der Formatierungsanalysezeit. 1. Verwenden Sie std :: chrono :: system_clock :: Now (), um die aktuelle Zeit zu erhalten, die in eine lesbare Zeichenfolge konvertiert werden kann, aber die Systemuhr ist jedoch m?glicherweise nicht eint?nig. 2. Verwenden Sie STD :: Chrono :: Steady_clock, um die Ausführungszeit zu messen, um die Monotonie zu gew?hrleisten, und umwandeln Sie sie durch Duration_cast in Millisekunden, Sekunden und andere Einheiten; 3. Zeitpunkt (Time_Point) und Dauer (Dauer) k?nnen interoperabel sein, aber die Aufmerksamkeit der Einheitenkompatibilit?t und der Uhr -Epoche (Epoche) sollte beachtet werden.

Volatile teilt dem Compiler mit, dass sich der Wert der Variablen jederzeit ?ndern kann, was verhindert, dass der Compiler den Zugriff optimiert. 1. für Hardware -Register, Signalhandler oder gemeinsame Variablen zwischen Threads (Modern C empfiehlt Std :: Atomic). 2. Jeder Zugriff wird direkt gelesen und schreiben Speicher anstatt an Register zwischengespeichert. 3. Es bietet keine Atomizit?t oder Thread -Sicherheit und stellt nur sicher, dass der Compiler das Lesen und Schreiben nicht optimiert. 4. St?ndig werden die beiden manchmal in Kombination verwendet, um schreibgeschützte, aber extern modifizierbare Variablen darzustellen. 5. Es kann keine Mutexes oder Atomoperationen ersetzen, und überm??iger Gebrauch beeinflusst die Leistung.

Es gibt haupts?chlich die folgenden Methoden, um Stapelspuren in C: 1 zu erhalten. Verwenden Sie Backtrace- und Backtrace_Symbols -Funktionen auf der Linux -Plattform. Durch Einbeziehung des Anrufstapels und der Drucksymbolinformationen muss der Parameter -rdynamische Parameter beim Kompilieren hinzugefügt werden. 2. Verwenden Sie CapturestackbackTrace -Funktion auf der Windows -Plattform, und Sie müssen dbgHelp.lib verknüpfen und sich auf die PDB -Datei verlassen, um den Funktionsnamen zu analysieren. 3.. Verwenden Sie Bibliotheken von Drittanbietern wie GoogleBreakpad oder Boost.Stacktrace, um die Operationen der Stack-Erfassungen plattformübergreifend zu plattformieren und zu vereinfachen. 4. Kombinieren Sie in Ausnahmebehandlung die oben genannten Methoden, um die Informationen zur automatischen Ausgabe von Stapelinformationen in Fangbl?cken auszuführen

Um den Python -Code in C aufzurufen, müssen Sie zuerst den Interpreter initialisieren und dann die Interaktion erreichen, indem Sie Zeichenfolgen, Dateien oder aufrufen oder bestimmte Funktionen aufrufen. 1. Initialisieren Sie den Interpreter mit py_initialize () und schlie?en Sie ihn mit py_finalize (); 2. Führen Sie den String -Code oder pyrun_simpleFile mit pyrun_simpleFile aus; 3.. Importieren Sie Module über pyimport_importmodule, erhalten Sie die Funktion über PyObject_getAttrstring, konstruieren

FunktionshidingInc -Auftrittsklasse -DefinesFunctionWithThesamenameasAsaBaseClassfunction und MakeTheBaseVersioninaccessiblethroughThederedClass

In C bezieht sich der Typ Pod (PlainoldData) auf einen Typ mit einer einfachen Struktur und kompatibel mit C -Sprachdatenverarbeitung. Es muss zwei Bedingungen erfüllen: Es verfügt über eine gew?hnliche Kopiensemantik, die von memcpy kopiert werden kann; Es hat ein Standardlayout und die Speicherstruktur ist vorhersehbar. Zu den spezifischen Anforderungen geh?ren: Alle nicht statischen Mitglieder sind ?ffentlich, keine benutzerdefinierten Konstrukteure oder Zerst?rer, keine virtuellen Funktionen oder Basisklassen, und alle nicht statischen Mitglieder selbst sind Schoten. Zum Beispiel strukturpoint {intx; inty;} ist Pod. Zu den Verwendungen geh?ren bin?re E/A, C -Interoperabilit?t, Leistungsoptimierung usw. Sie k?nnen prüfen, ob der Typ Pod über std :: is_pod ist, es wird jedoch empfohlen, STD :: IS_TRIVIA nach C 11 zu verwenden.

ANullPointerinc isaspecialValueInDicatingThatapoInterdoesNotPointToanyvalidmemoryLocation, AnditisusedtoSafelyManageandCheckpointersbefordereferencent.1.Beforec 11.0ornUllWaSused, ButnownullpreferredforclarityTypesafety.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.2.

In C gibt es drei Hauptmethoden, um Funktionen als Parameter zu übergeben: Verwenden von Funktionszeigern, STD :: Funktions- und Lambda -Ausdrücken sowie Vorlagengenerika. 1. Funktionszeiger sind die grundlegendste Methode, geeignet für einfache Szenarien oder C -Schnittstelle kompatibel, aber schlechte Lesbarkeit; 2. Std :: Funktion in Kombination mit Lambda-Ausdrücken ist eine empfohlene Methode im modernen C, die eine Vielzahl von Callable-Objekten unterstützt und Typ-Safe ist. 3. Die Vorlagen -Generikummethoden sind die flexibelsten und für Bibliothekscode oder allgemeinen Logik geeignet, k?nnen jedoch die Kompilierungszeit und das Codevolumen erh?hen. Lambdas, die den Kontext erfassen, müssen durch std :: function oder template übergeben werden und k?nnen nicht direkt in Funktionszeiger konvertiert werden.
