AVFoundationでカメラ(ムービー)撮影するときの、transform設定の注意点

Hirohito Kato ⌘ @hkato193

最初はAVCaptureConnectionのvideoOrientationから始めるのがお手軽でよろしいです。そして、AVAssetWriterInputのtransformに至る泥沼に入り込んでいくのです。

Norio Nomura @norio_nomura

@hkato193 transformにrotationだけではなくtranslateも入れるよう、親方の影響力で啓蒙してください。translateが入っていないポートレート(90度回転)な動画をOS XのQuickTime Playerで回転するとおかしくなったり。

Hirohito Kato ⌘ @hkato193

@norio_nomura わかりました！t,translateもいれればいいのですね！

Hirohito Kato ⌘ @hkato193

@norio_nomura 実際のところ、どんな値のtranslationを入れたらいいか分かっていないので、後で試してみますです。

Norio Nomura @norio_nomura

@hkato193 次の手順を試してみて 1. Hyperlapseでポートレイト撮影 2. Image CaptureでOS Xへ取込 3. 動画をQuickTime Playerで開く 4. 編集→反時計回りに回転

Hirohito Kato ⌘ @hkato193

もんげーっ ＞RT

Hirohito Kato ⌘ @hkato193

@norio_nomura 把握しました。これはつらいですね…

Hirohito Kato ⌘ @hkato193

@norio_nomura どこを原点にして回転しちゃっているかがまだ分かっていないので、標準カメラとの違いをMediaInfoで見ようとしていますが、原点の違いだけかどうかが不安なので解説お願いします<(_ _)>

Hirohito Kato ⌘ @hkato193

@norio_nomura 標準カメラのスローモーション(=背面カメラ)でも、反時計に90°だけはNGですね。これはどういうことだろう…。

Norio Nomura @norio_nomura

@hkato193 Hyperlapseの映像は、size(width:1280, height:720)にtransform(a:0,b:1,c:-1,d:0,tx:0,ty:0)が入っています。

Norio Nomura @norio_nomura

@hkato193 標準カメラでポートレイトで撮ると、txにheightが入るようになります。

Hirohito Kato ⌘ @hkato193

@norio_nomura なるほど…。ところでこのtransformってどうやって確認したのですか？MediaInfoだとRotationとして出てしまって、詳細が分かりませんでした。

Norio Nomura @norio_nomura

@hkato193 自作のiOSアプリ内でデバッガで値を見ただけですよ。

Hirohito Kato ⌘ @hkato193

@norio_nomura なるほど、ありがとうございます。

Norio Nomura @norio_nomura

@hkato193 あの挙動が気に入らなくて、自作アプリ内ではtransformを勝手に矯正する様にしましたw

Hirohito Kato ⌘ @hkato193

@norio_nomura なるほどですw。ありがとうございます！

Norio Nomura @norio_nomura

@hkato193 啓蒙記事wktk!

Hirohito Kato ⌘ @hkato193

@norio_nomura うひw。

Norio Nomura @norio_nomura

@hkato193 translationが入っていなくても初期状態では表示出来てるから、QuickTime Playerのバグとして報告すべきなのかも。

Hirohito Kato ⌘ @hkato193

@norio_nomura 標準カメラとHyperlapseのムービーの各メタデータをExiftool sno.phy.queensu.ca/~phil/exiftool/ で取り出して比較したのですが、Matrix Structureがどちらも同じで、どこに違いがあるかが謎に包まれ始めました。うひ

Norio Nomura @norio_nomura

@hkato193 えっとね、さっきのはAVAssetTrackのpreferredTransformです。

Hirohito Kato ⌘ @hkato193

@norio_nomura あ、すみません。のむらさんの作ったアプリだと、きっとAVFの何かで見ているのだろうなと思ったので、じゃあメタデータとしてどう違っているだろうと別経路で調べた次第です。そしたら唯一関係しそうなMatrix Structureが一致という事態になり…

Hirohito Kato ⌘ @hkato193

Exiftool owl.phy.queensu.ca/~phil/exiftool/ が、およそ考え得るメディアフォーマット（Lytroとか！）のメタデータを出力してくれて、かなり便利。

Norio Nomura @norio_nomura

@hkato193 ExifToolだと-eeを付ければ分かるみたい。

Norio Nomura @norio_nomura

@hkato193 標準カメラでポートレイト撮影した動画はexiftool -eeで Matrix Structure: 0 1 0 -1 0 0 1080 0 1 ってのが出ます。