


AWS Sideo Thumbnail Generator – Der serverlose Node.js-L?sungsleitfaden
Dec 27, 2024 am 10:45 AMHINWEIS: Teilen Sie es nicht in zwei Teile auf. Es gibt hier nicht genügend Text, um eine Aufteilung zu rechtfertigen, und der Artikel konzentriert sich auf die L?sung und nicht auf die Diskussion der Optionen.
Müssen Sie Video-Thumbnails effizient und kostengünstig in gro?em Ma?stab erstellen? Lassen Sie uns mit AWS Lambda eine wirklich serverlose L?sung erstellen, deren Betrieb im Vergleich zur Verwendung dedizierter Medienverarbeitungsdienste nur ein paar Cent kostet.
Was wir bauen werden
Die L?sung besteht aus einer Node.js-Lambda-Funktion, die:
- Verarbeitet g?ngige Videoformate
- Skalierung je nach Arbeitsbelastung
- Implementiert Wiederholungslogik für fehlgeschlagene Vorg?nge
- Bereitstellung über Infrastruktur als Code
- Kosten pro Video den Bruchteil eines Cents
Warum benutzerdefiniert
Es ist weder besonders einfach noch billig, Miniaturansichten in gro?em Ma?stab zu erstellen. Bei Videos ist der Kostenfaktor besonders wichtig – bei Bildern müssen Sie lediglich die Gr??e ?ndern, sie zuschneiden und die Ausgabe desselben Typs speichern. Sie k?nnen diese Verantwortung auf Cloud-Dienste von Drittanbietern übertragen, um sich auf die Bereitstellung anderer Funktionen zu konzentrieren, oder mit nur wenig Arbeit die Aufgabe erledigen, ohne Ihre AWS VPC zu verlassen. Bei Videos ist die Sache jedoch anders. Videodateien sind viel gr??er, wir müssen viele verschiedene Kodierungsstandards unterstützen und das Endergebnis ist kein Video mehr – wir extrahieren im Wesentlichen Standbilder.
AWS Native = Superteuer
Bei der Suche nach Optionen greife ich immer auf L?sungen zurück, die für die Plattform, auf der sich die Anwendung befindet, nativ sind. In AWS ist das MediaConvert oder MediaLive. Beide eignen sich hervorragend, wenn Sie eine professionelle Videoverarbeitung ben?tigen, aber nur ein Miniaturbild aus einem Video aufnehmen m?chten ... nun, sie k?nnen das auf jeden Fall, aber sind sie entwickelt, um solche Anwendungsf?lle zu bew?ltigen? ? Nicht wirklich.
So überraschend es auch sein mag, AWS verfügt über keinen speziellen Dienst zum Generieren von Miniaturansichten. Die verfügbaren L?sungen konzentrieren sich auf andere Anwendungsf?lle, z. B. die Bereitstellung von Unterstützung für Streaming-Medien oder die Ausführung erweiterter Videotransformationsaufgaben.
Die Probleme werden ganz offensichtlich, wenn man sich die Anforderungen für die Erstellung einer solchen Funktion mit diesen Diensten ansieht
- Bei der Arbeit mit AWS Media Services ist es nicht m?glich, eine Verarbeitungspipeline zu erstellen, für die keine Videoausgabe definiert ist. Sie müssen ein ganzes Video verarbeiten und das Ergebnis verwerfen, um nur die Miniaturansichten zu verwenden, die ein Nebenprodukt dieses Prozesses sind
- Daher ist es als Thumbnail-Generator sehr teuer – die Zahlung von 0,0075?$ pro Minute verarbeiteten Videos scheint nicht viel zu sein, aber es summiert sich sehr schnell – für 1.000 Videos sind die Verarbeitungskosten jeweils 15 Minuten lang würde über 100 $ liegen
Sollte das Erstellen einiger Video-Thumbnails mehr kosten als Ihr Morgenkaffee? ? Das liegt einfach daran, dass diese Dienste so leistungsstark sind, dass sie für einfache Aufgaben wie die Erstellung von Miniaturansichten zu viel des Guten sind.
Die tats?chlichen Kosten für AWS Media-Services liegen nicht nur in Dollar, sondern auch in der Komplexit?t, die Sie oft nicht ben?tigen.
Jedes Mal, wenn ich auf eine neue Anforderung sto?e, stellt sich mein Geist auf den Modus ?Das perfekte Werkzeug für den Job finden“ ein. Ich habe gepredigt, wie wichtig es ist, sich nicht auf das zu verlassen, was man kennt, und immer so viele Alternativen wie m?glich zu erkunden, damit ich vielleicht wie eine kaputte Schallplatte klinge ... aber ich sch?tze, ich mag die Melodie, die diese Platte spielt! ??
Man kann es auch als Krankheit bezeichnen. Ich bin mir meiner technischen Zwangsst?rungsprobleme voll bewusst... ?
Aber ich schweife ab...
Jenseits von AWS
Sicher gibt es auch andere L?sungen, aber diese bringen oft ihre eigenen Probleme mit sich:
- Externe Dienste berechnen normalerweise pro API-Aufruf oder verarbeiteter Datenmenge
- Sie müssen Ihre Videos zur Verarbeitung auf externe Dienste hochladen, was noch h?here Kosten für ausgehenden Traffic bedeutet
- Sie lassen sich m?glicherweise nicht gut skalieren, was zu einer Drosselung bei der Handhabung führt
Eine ma?geschneiderte, ma?geschneiderte L?sung
Lassen Sie uns etwas bauen, das nicht nur günstiger ist, sondern sich auch genau auf das konzentriert, was wir tats?chlich brauchen – eine serverlose L?sung, die Video-Thumbnails für buchst?blich ein paar Cent generiert. ?
Das System nutzt diese AWS-Dienste und -Tools:
- Amazon S3 – Speicher für Quellvideos und generierte Miniaturansichten
- AWS Lambda – Serverlose Rechenumgebung
- FFmpeg – Videoverarbeitungs-Framework
- Docker – Containerverpackung für FFmpeg- und Lambda-Code
- Amazon SQS – Nachrichtenwarteschlange zur Verarbeitungskoordination
Wenn ein Video in den Quell-S3-Bucket hochgeladen wird, l?st es ein Ereignis aus, das die Verarbeitungsanforderung in die Warteschlange stellt. Eine Lambda-Funktion nimmt es auf und verarbeitet es mithilfe von FFmpeg, das in einem Docker-Container ausgeführt wird. Die generierten Miniaturansichten werden dann in einem Ziel-S3-Bucket gespeichert. Behebbare vorübergehende Probleme wie Drosselung oder infrastrukturbezogene Probleme werden automatisch erneut versucht, w?hrend alle anderen fehlgeschlagenen Ereignisse zu Prüfzwecken automatisch an eine Warteschlange für unzustellbare Nachrichten gesendet werden.
Der Dienst generiert automatisch Video-Thumbnails in zwei Gr??en. Die gr??ere Version enth?lt ein halbtransparentes Videosymbol in der Mitte des Rahmens, das Benutzern hilft, Videoinhalte schnell zu identifizieren.
Beispielprojekt
- Von GH ziehen
Service
- Orchestrierung Videoverarbeitungs-Utility
- FFmpeg
- zwei Miniaturbildtypen
- verschiedene Gr??en, eine davon mit Overlay FFmpeg in einem Container
- So machen wir Ffmpeg CLI für Lambda verfügbar
- Docker-Datei Bereitstellung
- Container-Build
- Serverlose Bereitstellung
- Dockerisierte Lambda-Definition Testen
- int
- e2e Serverlos
- Gibt es an dieser Stelle noch etwas?
Der magische Beh?lter?
Hier ist unsere Docker-Datei, die FFmpeg mit Lambda verpackt:
Zeig mir das Geld! ?
Lassen Sie uns die Kosten für die Verarbeitung von 1000 Videos pro Monat aufschlüsseln:
AWS MediaConvert
- 0,08 $ pro Minute Video
- 1000 Videos × 0,08 $ = 80 $
Unsere L?sung
- Lambda: 1024 MB × 10 s × 1000 = 0,17 $
- S3: Speicher GET/PUT = $0,05
- Gesamt: 0,22?$
Das ist eine Kostenreduzierung von 99,7 %! ?
Was k?nnte schief gehen? ?
Obwohl diese L?sung gro?artig ist, ist sie nicht ohne Fallstricke:
- Speicherverbrauch: FFmpeg kann speicherhungrig sein. Wenn Sie 4K-Videos verarbeiten, müssen Sie m?glicherweise den Lambda-Speicher aufrüsten.
- Timeout-Limits: Bei sehr langen Videos kann es sein, dass Sie das Timeout von Lambda erreichen. Erw?gen Sie in diesen F?llen die Verwendung von Schrittfunktionen.
- Kaltstarts: Der Container ist ziemlich gro?, daher k?nnen erste Aufrufe langsamer sein.
Was kommt als n?chstes? ?
Das ist erst der Anfang! Sie k?nnen diese L?sung erweitern auf:
- Generieren Sie mehrere Miniaturbildgr??en
- Video-Metadaten extrahieren
- Vorschau-GIFs erstellen
- Video-Wasserzeichen hinzufügen
Zusammenfassung?
Wir haben eine kostengünstige, skalierbare L?sung für die Erstellung von Video-Thumbnails entwickelt, die Ihr Budget nicht sprengt. Sie zahlen nicht mehr für Funktionen, die Sie nicht ben?tigen!
Denken Sie daran: Manchmal ist die beste L?sung nicht die teuerste oder komplexeste – es ist diejenige, die genau das tut, was Sie brauchen, nicht mehr und nicht weniger.
Notiz
Fanden Sie das hilfreich? Folgen Sie mir für weitere AWS- und serverlose Inhalte! Und wenn Ihre Miniaturansichten wie moderne Kunst und nicht wie Ihr Video aussehen ... prüfen Sie zun?chst Ihr Videoformat und schreiben Sie dann unten einen Kommentar! ?
Spa? beiseite, ich würde gerne von Ihren Erfahrungen mit der Videoverarbeitung in AWS h?ren. Haben Sie andere kreative M?glichkeiten zur Kostenoptimierung gefunden? Teilen Sie es in den Kommentaren!
Haftungsausschluss
Obwohl diese L?sung in der Produktion kampferprobt wurde, testen Sie sie bitte gründlich in Ihrer eigenen Umgebung, bevor Sie sie bereitstellen. Falls mal etwas Feuer f?ngt, habe ich ein tolles Rezept für Marshmallows! ?
--- Meine Notizen – Diskussionspunkte für den Artikel
Warum Docker mit Lambda – nicht die erste Wahl, manchmal die einzige Wahl, Layer-Alternative
Der Betrieb ist im Vergleich zu den AWS Media-Diensten supergünstig
Es geht schnell: Vergleichen Sie verschiedene Dateigr??en
Testbares Ffmpeg
Das obige ist der detaillierte Inhalt vonAWS Sideo Thumbnail Generator – Der serverlose Node.js-L?sungsleitfaden. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Hei?e KI -Werkzeuge

Undress AI Tool
Ausziehbilder kostenlos

Undresser.AI Undress
KI-gestützte App zum Erstellen realistischer Aktfotos

AI Clothes Remover
Online-KI-Tool zum Entfernen von Kleidung aus Fotos.

Clothoff.io
KI-Kleiderentferner

Video Face Swap
Tauschen Sie Gesichter in jedem Video mühelos mit unserem v?llig kostenlosen KI-Gesichtstausch-Tool aus!

Hei?er Artikel

Hei?e Werkzeuge

Notepad++7.3.1
Einfach zu bedienender und kostenloser Code-Editor

SublimeText3 chinesische Version
Chinesische Version, sehr einfach zu bedienen

Senden Sie Studio 13.0.1
Leistungsstarke integrierte PHP-Entwicklungsumgebung

Dreamweaver CS6
Visuelle Webentwicklungstools

SublimeText3 Mac-Version
Codebearbeitungssoftware auf Gottesniveau (SublimeText3)

Der Müllsammlung von JavaScript verwaltet den Speicher automatisch über einen Tag-Clearing-Algorithmus, um das Risiko eines Speicherlecks zu verringern. Der Motor durchquert und markiert das aktive Objekt aus dem Wurzelobjekt, und nicht markiert wird als Müll behandelt und gel?scht. Wenn das Objekt beispielsweise nicht mehr referenziert wird (z. B. die Variable nach NULL), wird es in der n?chsten Runde des Recyclings freigegeben. Zu den h?ufigen Ursachen für Speicherlecks geh?ren: ① Unger?te Timer oder Event -H?rer; ② Verweise auf externe Variablen in Schlie?ungen; ③ Globale Variablen halten weiterhin eine gro?e Datenmenge. Der V8 -Motor optimiert die Recyclingeffizienz durch Strategien wie Recycling von Generationen, inkrementelle Markierung, paralleles/gleichzeitiges Recycling und verkürzt die Hauptblockierungszeit. W?hrend der Entwicklung sollten unn?tige globale Referenzen vermieden und Objektverb?nde umgehend dekoriert werden, um die Leistung und Stabilit?t zu verbessern.

Es gibt drei g?ngige M?glichkeiten, HTTP-Anforderungen in Node.js zu initiieren: Verwenden Sie integrierte Module, Axios und Knotenfetch. 1. Verwenden Sie das integrierte HTTP/HTTPS-Modul ohne Abh?ngigkeiten, das für grundlegende Szenarien geeignet ist, jedoch eine manuelle Verarbeitung von Datengen?hten und Fehlerüberwachung erfordert, z. 2.Axios ist eine auf Versprechen basierende Bibliothek von Drittanbietern. Es verfügt über eine kurze Syntax und leistungsstarke Funktionen, unterstützt Async/Auseait, automatische JSON -Konvertierung, Interceptor usw. Es wird empfohlen, asynchrone Anforderungsvorg?nge zu vereinfachen. 3.Node-Fetch bietet einen Stil ?hnlich dem Browser-Abruf, basierend auf Versprechen und einfacher Syntax

JavaScript -Datentypen sind in primitive Typen und Referenztypen unterteilt. Zu den primitiven Typen geh?ren String, Anzahl, Boolesche, Null, undefiniertes und Symbol. Die Werte sind unver?nderlich und Kopien werden bei der Zuweisung von Werten kopiert, sodass sie sich nicht gegenseitig beeinflussen. Referenztypen wie Objekte, Arrays und Funktionen speichern Speicheradressen, und Variablen, die auf dasselbe Objekt zeigen, wirkt sich gegenseitig aus. Typeof und Instanz k?nnen verwendet werden, um die Typen zu bestimmen, aber auf die historischen Probleme der TypeOfnull zu achten. Das Verst?ndnis dieser beiden Arten von Unterschieden kann dazu beitragen, einen stabileren und zuverl?ssigeren Code zu schreiben.

Welches JavaScript -Framework ist die beste Wahl? Die Antwort besteht darin, die am besten geeigneten nach Ihren Bedürfnissen zu w?hlen. 1.React ist flexibel und kostenlos und für mittlere und gro?e Projekte geeignet, für die hohe Anpassungs- und Teamarchitekturf?higkeiten erforderlich sind. 2. Angular bietet vollst?ndige L?sungen, die für Anwendungen auf Unternehmensebene und langfristige Wartung geeignet sind. 3.. Vue ist einfach zu bedienen, geeignet für kleine und mittlere Projekte oder schnelle Entwicklung. Unabh?ngig davon, ob es einen technologischen Stack, die Teamgr??e, der Projektlebenszyklus gibt und ob SSR erforderlich ist, sind auch wichtige Faktoren für die Auswahl eines Rahmens. Kurz gesagt, es gibt keinen absolut besten Rahmen, die beste Wahl ist die, die Ihren Bedürfnissen entspricht.

Hallo, JavaScript -Entwickler! Willkommen in den JavaScript -Nachrichten dieser Woche! Diese Woche konzentrieren wir uns auf: Oracas Markenstreit mit Deno, neue JavaScript -Zeitobjekte werden von Browsern, Google Chrome -Updates und einigen leistungsstarken Entwickler -Tools unterstützt. Fangen wir an! Der Markenstreit von Oracle mit dem Versuch von Deno Oracle, ein "JavaScript" -Marke zu registrieren, hat Kontroversen verursacht. Ryan Dahl, der Sch?pfer von Node.js und Deno, hat eine Petition zur Absage der Marke eingereicht, und er glaubt, dass JavaScript ein offener Standard ist und nicht von Oracle verwendet werden sollte

IIFE (SofortinvokedFunctionExpression) ist ein Funktionsausdruck, der unmittelbar nach der Definition ausgeführt wird und zum Isolieren von Variablen und zur Vermeidung des kontaminierenden globalen Bereichs verwendet wird. Es wird aufgerufen, indem die Funktion in Klammern umwickelt ist, um sie zu einem Ausdruck und einem Paar von Klammern zu machen, gefolgt von ihr, wie z. B. (function () {/code/}) ();. Zu den Kernverwendungen geh?ren: 1.. Variable Konflikte vermeiden und die Duplikation der Benennung zwischen mehreren Skripten verhindern; 2. Erstellen Sie einen privaten Bereich, um die internen Variablen unsichtbar zu machen. 3.. Modularer Code, um die Initialisierung zu erleichtern, ohne zu viele Variablen freizulegen. Zu den allgemeinen Schreibmethoden geh?ren Versionen, die mit Parametern und Versionen der ES6 -Pfeilfunktion übergeben wurden. Beachten Sie jedoch, dass Ausdrücke und Krawatten verwendet werden müssen.

Versprechen ist der Kernmechanismus für den Umgang mit asynchronen Operationen in JavaScript. Das Verst?ndnis von Kettenanrufen, Fehlerbehebung und Kombination ist der Schlüssel zum Beherrschen ihrer Anwendungen. 1. Der Kettenaufruf gibt ein neues Versprechen durch .then () zurück, um asynchrone Prozessverkampferung zu realisieren. Jeder. Dann () erh?lt das vorherige Ergebnis und kann einen Wert oder ein Versprechen zurückgeben; 2. Die Fehlerbehandlung sollte .Catch () verwenden, um Ausnahmen zu fangen, um stille Ausf?lle zu vermeiden, und den Standardwert im Fang zurückgeben, um den Prozess fortzusetzen. 3. Combinatoren wie Promise.All () (erfolgreich erfolgreich erfolgreich nach allen Erfolg), Versprechen.Race () (Die erste Fertigstellung wird zurückgegeben) und Versprechen.Allsettled () (Warten auf alle Fertigstellungen)

Cacheapi ist ein Tool, das der Browser zur Cache -Netzwerkanfragen bereitstellt, das h?ufig in Verbindung mit dem Servicearbeiter verwendet wird, um die Leistung der Website und die Offline -Erfahrung zu verbessern. 1. Es erm?glicht Entwicklern, Ressourcen wie Skripte, Stilbl?tter, Bilder usw. Zu speichern; 2. Es kann die Cache -Antworten entsprechend den Anfragen übereinstimmen. 3. Es unterstützt das L?schen bestimmter Caches oder das L?schen des gesamten Cache. 4.. Es kann Cache -Priorit?ts- oder Netzwerkpriorit?tsstrategien durch Servicearbeiter implementieren, die sich auf Fetch -Ereignisse anh?ren. 5. Es wird h?ufig für die Offline -Unterstützung verwendet, die wiederholte Zugriffsgeschwindigkeit, die Vorspannungs -Schlüsselressourcen und den Inhalt des Hintergrundaktualisierungss beschleunigen. 6. Wenn Sie es verwenden, müssen Sie auf die Cache -Versionskontrolle, Speicherbeschr?nkungen und den Unterschied zum HTTP -Caching -Mechanismus achten.
