Transloadit の音声遅延で音声同期を使いこなす

音声遅延パラメーターの紹介
/video/merge Robotの特徴的な機能の一つが、指定した秒数だけ音声を一時停止できる
audio_delay パラメーターです。動画に音声の遅延を加えるのは、かなり限られた用途に思えるかもしれません。実際に「音声遅延」で検索すると、意図的に遅延を加える方法ではなく、遅延を_解消する_方法が大量に見つかります。ところが、/video/merge Robotをしばらく試してみると、このパラメーターの便利な使い道がすぐに見つかりました。今回はそれを紹介します 😄
動画と音声の準備
新しい透かしパラメーターを紹介した前回の記事と同様に、今回も Pexels videos の無料動画を使って、パラメーターの使い方を簡単に紹介します。また、音声も必要なので、Pierce Murphy の「Hey Mercy」という無料の楽曲を使います。この楽曲は CC BY 4.0 ライセンスで公開されています。

音声と動画の同期
/video/merge Robotを使えば、先ほどの動画ファイルと音声ファイルを簡単に結合できます。以下は、私の Dropbox に保存した動画と音声を取り出して結合し、完成した動画を YouTube にアップロードするために作成した実装例です。
const { Transloadit } = require('transloadit')
const transloadit = new Transloadit({
authKey: process.env.TRANSLOADIT_AUTH_KEY,
authSecret: process.env.TRANSLOADIT_SECRET_KEY,
})
const options = {
params: {
steps: {
dropbox_imported_video: {
robot: '/dropbox/import',
result: 'true',
credentials: 'my_videos',
path: `Videos/${process.argv[2]}`,
},
dropbox_imported_mp3: {
robot: '/dropbox/import',
result: 'true',
credentials: 'my_videos',
path: `Music/${process.argv[3]}`,
},
merged: {
use: {
steps: [
{
name: 'dropbox_imported_video',
as: 'video',
},
{
name: 'dropbox_imported_mp3',
as: 'audio',
},
],
},
robot: '/video/merge',
result: 'true',
audio_delay: 0,
ffmpeg_stack: 'v7',
preset: 'hls-1080p',
},
exported: {
use: ['merged'],
robot: '/youtube/store',
credentials: 'youtube_auth_xxxxxxxxxx',
title: process.argv[4],
description: 'Using the /video/merge Robot I can merge audio and video!',
keywords: 'music',
category: 'education',
visibility: 'unlisted',
},
},
},
}
transloadit.createAssembly(options)
.then((result) => console.log({ result }))
.catch(console.error)
結果はこちらです。
あまりタイミングが合っていませんね。ここで活躍するのが
audio_delay パラメーターです。実装の /video/merge の部分に、次のように追加してみましょう。
merged:{
use: {
steps: [
{
name: "dropbox_imported_video",
as: "video"
},
{
name: "dropbox_imported_mp3",
as: "audio"
}
]
},
robot: "/video/merge",
result: true,
audio_delay: 2.5,
ffmpeg_stack: "v7",
preset: "hls-1080p"
}
音声の再生を開始するタイミングは、秒数で指定できます。元の動画では約 2.5 秒で針が下りるようなので、その時点から音声を再生させましょう。コードをもう一度実行したら、どんな動画になったか、さっそく見てみます。
うまくいきました!audio delay パラメーターのおかげで、音声と動画がぴったり同期しています。個人的には、Transloadit のRobotで使えるパラメーターの中でも、特にユニークなものの一つだと思います。この記事が創作のヒントになれば幸いです。少なくとも、動画の音声遅延を解消するのではなく、あえて加える方法という、なかなか見つからない情報を探している方の助けになればと思います!