Dateien zu Amazon S3 exportieren
🤖/s3/store exportiert Encoding-Ergebnisse nach Amazon S3.

Wenn Amazon S3 neu für Sie ist, lesen Sie unser Tutorial zur Verwendung Ihres eigenen S3-Buckets.
Die URL der Ergebnisdatei in Ihrem S3-Bucket wird im Assembly Status JSON zurückgegeben. Wenn die Versionierung für Ihren S3-Bucket aktiviert ist, wird die Versions-ID der Datei in meta.version_id zurückgegeben.
Warnung
Vermeiden Sie Berechtigungsfehler. Standardmäßig ist acl auf "public" gesetzt. AWS S3 verfügt über eine Bucket-Einstellung namens Block new public ACLs and uploading public objects. Setzen Sie diese in Ihrem Bucket auf False, wenn acl weiterhin auf "public" gesetzt bleiben soll. Andernfalls treten in Ihren Assemblies trotz korrekt konfigurierter S3-Zugangsdaten Berechtigungsfehler auf.
Warnung
Verwenden Sie DNS-konforme Bucket-Namen. Ihr Bucket-Name muss DNS-konform sein und darf keine Großbuchstaben enthalten. Alle nicht alphanumerischen Zeichen in den Dateinamen werden durch einen Unterstrich und Leerzeichen durch Bindestriche ersetzt. Wenn Ihr vorhandener S3-Bucket Großbuchstaben enthält oder anderweitig nicht DNS-konform ist, schreiben Sie die Ergebnis-URLs mit dem Parameter url_prefix beim Robot um.
Zugriff beschränken
Sie müssen Ihrem Bucket außerdem Berechtigungen hinzufügen, damit Transloadit ordnungsgemäß darauf zugreifen kann. Hier ist eine IAM-Beispielrichtlinie, die Sie verwenden können. Gemäß dem Prinzip der geringsten Rechte enthält sie die mindestens erforderlichen Berechtigungen, um mit Transloadit eine Datei in Ihren S3-Bucket zu exportieren. Abhängig von Ihrer Anwendung benötigen Sie möglicherweise weitere Berechtigungen, insbesondere Leseberechtigungen.
Passen Sie {BUCKET_NAME} in den Werten für Sid und Resource entsprechend an. Diese Richtlinie gewährt außerdem allen Ihren Benutzern die mindestens erforderlichen Berechtigungen. Wir empfehlen Ihnen, einen separaten Amazon-IAM-Benutzer zu erstellen und dessen Benutzer-ARN, die Sie im Tab „Zusammenfassung“ eines Benutzers hier finden, als Wert für Principal zu verwenden. Weitere Informationen dazu finden Sie hier.
{
"Version": "2012-10-17",
"Statement": [
{
"Sid": "AllowTransloaditToStoreFilesIn{BUCKET_NAME}Bucket",
"Effect": "Allow",
"Action": ["s3:GetBucketLocation", "s3:ListBucket", "s3:PutObject", "s3:PutObjectAcl"],
"Resource": ["arn:aws:s3:::{BUCKET_NAME}", "arn:aws:s3:::{BUCKET_NAME}/*"]
}
]
}
Der Wert Sid ist lediglich eine Kennung, anhand derer Sie die Regel später wiedererkennen können. Sie können ihn beliebig benennen.
Die Richtlinie muss in zwei Teile aufgeteilt werden, da die Aktion ListBucket Berechtigungen für den Bucket erfordert, während die anderen Aktionen Berechtigungen für die Objekte im Bucket benötigen. Wenn die Objekte das Ziel sind, enthält der Parameter Resource am Ende einen Schrägstrich und ein Sternchen. Wenn die Richtlinie hingegen auf den Bucket abzielt, werden der Schrägstrich und das Sternchen weggelassen.
Beachten Sie: Wenn Sie den Parameter acl beim Robot auf "bucket-default" setzen, benötigen Sie die Berechtigung "s3:PutObjectAcl" nicht in Ihrer Bucket-Richtlinie.
Um korrekte Ergebnis-URLs zu erstellen, müssen wir wissen, in welcher Region sich Ihr S3-Bucket befindet. Dafür benötigen wir die Berechtigung GetBucketLocation. Wenn wir die Region Ihres Buckets auf diese Weise ermitteln, werden Ihre Assemblies außerdem langsamer. Um dies erheblich zu beschleunigen und die Berechtigung GetBucketLocation nicht mehr zu benötigen, haben wir den Parameter bucket_region zu den Robots /s3/store und /s3/import hinzugefügt. Wir empfehlen, ihn stets zu verwenden.
Beachten Sie bitte, dass Sie bei Verwendung einer Bucket-Verschlüsselung möglicherweise auch "sts:*" und "kms:*" zur Bucket-Richtlinie hinzufügen müssen. Falls bei der Verwendung unserer beispielhaften Bucket-Richtlinie Probleme auftreten, lesen Sie bitte hier und hier weiter.
Schützen Sie Ihre Zugangsdaten
Anwendungsbeispiel
Hochgeladene Dateien in den Ordner my_target_folder eines S3-Buckets exportieren:
{
"steps": {
"exported": {
"robot": "/s3/store",
"use": ":original",
"credentials": "YOUR_AWS_CREDENTIALS",
"path": "my_target_folder/${unique_prefix}/${file.url_name}"
}
}
}Parameter
interpolateboolean | Record<string, boolean>Steuert, ob einzelne Robot-Anweisungsfelder Assembly Variables interpolieren.
Standardmäßig interpolieren die meisten Robot-Anweisungsfelder Assembly Variables. Mit dem Wert
falsebehandeln Sie alle Anweisungsfelder als Literaltext. Wenn Sie stattdessen einen einzelnen Feldpfad auffalsesetzen, wird nur dieses Feld als Literaltext behandelt. Bei Robot-spezifischen Feldern, die standardmäßig als Literaltext behandelt werden, aktivieren Sie die Interpolation wieder, indem Sie hierfürtruefestlegen oder für den jeweiligen Feldpfad den Werttrueverwenden.Verwenden Sie Feldnamen wie
pathoder für verschachtelte Objekte Punktpfade wieffmpeg.vfals Pfadangabe.output_metaRecord<string, boolean> | boolean | Array<string>Damit können Sie eine Reihe von Metadaten festlegen, deren Berechnung mehr CPU-Ressourcen beansprucht. Sie sind daher standardmäßig deaktiviert, damit Ihre Assemblies schnell verarbeitet werden.
Für Bilder können Sie diesem Objekt den Eintrag
"has_transparency": truehinzufügen, um zu ermitteln, ob das Bild transparente Bereiche enthält. Mit dem Eintrag"dominant_colors": truekönnen Sie außerdem ein Array mit hexadezimalen Farbcodes aus dem Bild extrahieren.Für Bilder können Sie auch den Eintrag
"blurhash": truehinzufügen, um einen BlurHash zu extrahieren – eine kompakte Darstellung eines Platzhalters für das Bild, mit der Sie eine unscharfe Vorschau anzeigen können, während das vollständige Bild geladen wird.Für Videos können Sie den Parameter
"colorspace": truehinzufügen, um den Farbraum des Ausgabevideos zu extrahieren.Für Videos können Sie außerdem den Eintrag
"interlaced": truehinzufügen, um zu erkennen, ob das Video im Zeilensprungverfahren vorliegt. Dazu wird die ressourcenschonende ffprobe-Optionfield_ordermit einem begrenzten Stichprobendurchlauf mithilfe vonidetüber die ersten Frames der Quelle kombiniert. Die Ergebnisseinterlacedundfield_ordersowie das Diagnoseobjektinterlace_detectionwerden dabei unterfile.metaausgegeben. Dies ist rechenintensiv und wird entsprechend abgerechnet.Für Audio können Sie den Eintrag
"mean_volume": truehinzufügen, um einen einzelnen Wert für die durchschnittliche Lautstärke der Audiodatei zu erhalten.Sie können diesen Parameter auch auf
falsesetzen, um die Metadatenextraktion zu überspringen und das Transcoding zu beschleunigen.resultboolean(Standard:false)Ob die Ergebnisse dieses Steps im Assembly Status JSON enthalten sein sollen
queuebatchWenn Sie die Queue auf „batch“ setzen, wird die Priorität der Jobs für diesen Step manuell herabgestuft. So vermeiden Sie, Priority Job Slots für Jobs zu belegen, die keine Wartezeit von null in der Queue benötigen.
force_acceptboolean(Standard:false)Erzwingt, dass ein Robot einen Dateityp akzeptiert, den er sonst ignorieren würde.
Standardmäßig ignorieren Robots Dateien, deren Typ sie nicht kennen. 🤖/video/encode ignoriert beispielsweise problemlos Eingabebilder.
Wenn Sie den Parameter
force_acceptauftruesetzen, können Sie erzwingen, dass Robots alle übergebenen Dateien akzeptieren. Dies führt in der Regel zu Fehlern und sollte nur zur Fehlersuche oder zur Behandlung von Grenzfällen verwendet werden.ignore_errorsboolean | Array<meta | execute>(Standard:[])Fehler in bestimmten Verarbeitungsphasen ignorieren.
Wenn Sie diesen Wert auf
["meta"]setzen, ignoriert der Robot Fehler bei der Metadatenextraktion.Wenn Sie diesen Wert auf
["execute"]setzen, ignoriert der Robot Fehler während der Hauptausführungsphase.Wenn Sie diesen Wert auf
truesetzen, entspricht dies["meta", "execute"]und Fehler in beiden Phasen werden ignoriert.usestring | Array<string> | Array<object> | objectGibt an, welche Steps als Eingabe verwendet werden sollen.
- Sie können beliebige Namen für Steps wählen, außer
":original"(reserviert für von Transloadit verarbeitete Benutzer-Uploads) - Sie können mehrere Steps mithilfe von Arrays als Eingabe angeben:
{ "use": [ ":original", "encoded", "resized" ] } - Sie können Eingabe-Steps außerdem mit
askennzeichnen, um Robots die semantische Funktion zu übermitteln:{ "use": [ { "name": ":original", "as": "image" }, { "name": ":original", "as": "mask" } ] }
Tipp
Das ist wahrscheinlich alles, was Sie über
usewissen müssen. Sie können sich jedoch auch die erweiterten Anwendungsfälle ansehen.- Sie können beliebige Namen für Steps wählen, außer
credentialsstringErstellen Sie bitte die zugehörigen Template-Zugangsdaten in Ihrem Transloadit-Konto und verwenden Sie den Namen dieser Template-Zugangsdaten als Wert für diesen Parameter. Sie enthalten die Werte für Ihre S3-Parameter
bucket,key,secretundbucket_region.Wir empfehlen, stets Template-Zugangsdaten zu verwenden. Einige Anwendungsfälle erfordern jedoch dynamische Zugangsdaten, für die Template-Zugangsdaten aufgrund ihrer statischen Natur zu umständlich sind. Wenn dies auf Ihren Anwendungsfall zutrifft, können Sie stattdessen die folgenden Parameter verwenden:
"bucket","bucket_region"(zum Beispiel:"us-east-1"oder"eu-west-2"),"key","secret".pathstring(Standard:"${unique_prefix}/${file.url_name}")Der Speicherort, an dem die Datei gespeichert werden soll. Er kann alle verfügbaren Assembly Variables enthalten. Dabei darf es sich nicht um ein Verzeichnis handeln.
url_prefixstring(Standard:"http://{bucket}.s3.amazonaws.com/")Das URL-Präfix für die zurückgegebene URL, beispielsweise
"http://my.cdn.com/some/path/".aclbucket-default | private | public | public-read(Standard:"public-read")Die für diese Datei verwendeten Berechtigungen.
Beachten Sie, dass der Standardwert
"public-read"aufgrund der standardmäßig aktivierten Option"Block all public access"zu Berechtigungsfehlern führen kann, wenn Sie in der AWS-Konsole einen neuen Amazon-S3-Bucket erstellen.check_integrityboolean(Standard:false)Berechnen und übermitteln Sie die Prüfsumme der Datei, damit S3 ihre Integrität nach dem Hochladen überprüfen kann. Dies kann bei gelegentlichen Problemen durch beschädigte Dateien helfen.
Wenn Sie diese Option aktivieren, verlängert sich die Gesamtausführungszeit, da die Integritätsprüfung insbesondere bei größeren Dateien sehr CPU-intensiv sein kann.
headersRecord<string, string>(Standard:{"Content-Type":"${file.mime}"})Ein Objekt mit einer Liste von Headern, die für diese Datei in S3 festgelegt werden sollen, zum Beispiel
{ FileURL: "${file.url_name}" }. Dies kann auch alle verfügbaren Assembly Variables enthalten. Eine Liste der verfügbaren Header finden Sie hier.Objektmetadaten können über
x-amz-meta-*-Header angegeben werden. Beachten Sie, dass diese Header keine Nicht-ASCII-Metadatenwerte unterstützen.tagsRecord<string, string>(Standard:{})Mit Objekt-Tagging können Sie Speicherinhalte kategorisieren. Sie können einem Objekt bis zu 10 Tags zuweisen. Tags, die einem Objekt zugeordnet sind, müssen eindeutige Tag-Schlüssel haben.
hoststring(Standard:"s3.amazonaws.com")Der Host des verwendeten Speicherdienstes. Sie müssen diesen nur festlegen, wenn der verwendete Speicherdienst nicht Amazon S3 ist, aber über eine kompatible API verfügt, beispielsweise hosteurope.de. Standardmäßig wird das HTTP-Protokoll verwendet. Für jedes andere Protokoll müssen Sie dieses explizit angeben. Als Präfix für den Host können Sie beispielsweise entweder
https://für das eine Protokoll oders3://für das andere Protokoll verwenden.no_vhostboolean(Standard:false)Setzen Sie diesen Parameter auf
true, wenn Sie einen benutzerdefinierten Host verwenden und Fehler vom Typ „Zugriff verweigert“ auftreten.sign_urls_forstring | numberDieser Parameter stellt signierte URLs im Ergebnis-JSON bereit (in den Eigenschaften
signed_urlundsigned_ssl_url). Der Wert, den Sie für diesen Parameter festlegen, entspricht der Ablaufzeit der URL in Sekunden. Wenn dieser Parameter nicht verwendet wird, werden keine URLs signiert.session_tokenstringDas Sitzungstoken für den S3-Speicher. Es wird nur verwendet, wenn die Zugangsdaten von einem IAM-Benutzer mit der Berechtigung
sts:AssumeRolestammen.
Demos
Verwandte Blogbeiträge
- API update: renaming Robots for better clarity (English)
- Addressing S3 put request inconsistencies at Transloadit (English)
- Introducing /s3/store Robot's 'url_prefix' parameter (English)
- Launching SFTP Robot & unveiling new homepage (English)
- All Robots now support expanded Assembly Variables (English)
- Switching to official S3 CLI for enhanced file exporting (English)
- Addressing the S3 incident with fixes and discounts (English)
- New pricing model for future Transloadit customers (English)
- No-code real-time video uploading with Bubble & Transloadit (English)
- Export files to DigitalOcean Spaces with ease (English)
- Creating audio waveform videos with FFmpeg & Node.js (English)
- New feature: auto-transcribe videos with subtitles (English)
- Celebrating transloadit’s 2021 milestones and progress (English)
- Expanding our API for better Terraform provisioning (English)
- What is content localization? (English)
- How to set up an S3 bucket to use with Transloadit (English)
- Automatically correct page orientation in documents (English)
- Automatic background removal from images (English)
- Generate stunning images from text using AI (English)