クックパッド 広告事業部の大野晋一です。責任範囲は広告事業の純広告およびネットワーク広告の商品開発担当で、事業部にはそれぞれの売上でコミットしています。
この記事では、動画変換の仕組みにおけるDockerの活用について紹介します。
クックパッドは8月8日、iOS/Androidのブラウザにおいて動画クリエイティブを掲出する広告商品を公開しました。広告商品としての詳細はプレスリリースやスライドを見ていただくのがわかりやすいのですが、本稿に関係する特徴としてスマートフォンのブラウザで自動的に再生が開始されるというものがあります。
スマートフォンのブラウザにおいては、現在のところ、動画を自動再生させることは出来ません。これはAppleやGoogleといったブラウザベンダが課している制約です。そこで、クックパッドでは、janiというライブラリを使い、特定の規則に基づいて作られた画像を、JavaScriptで"動かす"ことによって自動再生を実現しました。
今回の話はこの変換の仕組みである、janiConverterに関するものです。
動画変換の仕組み：janiConverter
変換のざっくりとした処理手順としては
- 動画から、fpsで指定された頻度で静止画を切り出す
- 切り出した静止画を一定のルールで縦につなぎ合わせる
- 2で得た画像群をブラウザから読み出すことの出来るストレージに配置する
- 3の配置に応じたDOMをHTMLとして出力する
- ブラウザが、DOMおよびjaniのJavaScriptを受け取ると、動画として再生が可能になる
というものです。ここで1ではffmpegを使い、2ではimagemagickを使います。つまり、janiConverterを動かすインスタンス上にはffmpegとimagemagickが必要です。
もう一度言うと、「ffmpeg」と「imagemagick」がインストールされたインスタンスが必要です。
このふたつはコンパイルとセットアップが面倒なソフトウェアの東西横綱といっても過言ではなく、いろいろあって（※）、Dockerを使うことにしました。cookpadで本番投入されたDockerはこれが初めてになります。
※： いろいろというのは、主に個人的な興味と、試行錯誤で開発機の環境を汚したくないというのと、インフラストラクチャー部との30分ほどの検討のことです。おそらくインフラストラクチャー部としてもDockerの最初の被験者を捜していたところに、そこまでパフォーマンスが問われなくて社内向け、という良い鴨が現れた格好なのではないかと思っています
Dockerの導入
とはいっても、導入は簡単で、Linuxでセットアップする際のコマンドを普通にDockerfileに書いていくだけです。ffmpegについては、既に公開されているcellofellow/ffmpegを使わせてもらっています。
使ってみて一番良いなと思ったのはこの「普通にDockerfileを書けばOK」というところで、例えば、アプリケーションコードがDockerに依存したり影響を受けたりすることが無いのはDockerの良さです。
Dockerのメリットとおすすめの適用場面
そして、動画変換の仕組みを運用していくなかで以下のようなメリットがあると思っています。
- 新しいインスタンスを用意する際にffmpeg/imagemagickの面倒な準備が必要ない。jenkinsがリポジトリの更新をポールして常に最新の状態でdocker buildしてくれているので、インスタンスはそれをpullしてくるだけ
- janiConverterではsidekiqを使っており、実際のエンコードをworkerが処理するが、複数のworkerを立ち上げることが容易に出来る。ここでもworker用のインスタンスはdocker pullするだけ。リビジョンさえ同じなら全てのworkerの環境が同じであることが保証される
- Docker依存がアプリケーションコードや設定ファイルに入らない。いつでも他の手段に移れる
また、開発においても次のような良さを体験できました。
- 複数worker環境でのテストが容易である。マシンリソースの許す限りひたすらdocker runして立ち上げてテストできる
- 本番と完全に同じ環境が保証される。たまたま開発環境で動いているみたいなバグをテストしてつぶしやすい。実際に、OS XとLinuxでの挙動の違いによるバグを発見して修正できた（初歩的ですね……）。
- アプリケーションのポータビリティがいやでもある程度保証される。環境依存がハードコードされないのは良い
今回のように、master-worker構成が必要な仕組みを作ったり、ファイルなどのOS依存が出やすいものを扱う場合には開発においてもメリットは大きく、お勧めできます。そうした特徴のない通常のアプリケーションであれば開発段階ではあまりメリットはなさそうです。
Docker自体を運用していくノウハウとか、大量のトラフィックやリクエストをさばくノウハウなどはまだまだ確立されていないという感触ですが、このあたりは、今後当社のインフラストラクチャー部からも共有されていくことでしょう。