[Android]フォルダブルデバイスの画面キャプチャ

Androidの世界に、少しずつフォルダブルデバイスが増えてきましたね。開発に活用していくぞ！の思いで、思い切って手を出してしまいました。

アプリのフォルダブル対応まで完了したので、 adbで画面キャプチャを撮ろう としたときに、カバーディスプレイの方でキャプチャを撮れないぞ？となったのでその対処方法をご紹介します。

遭遇した問題

Galaxy Fold3のadb画面キャプチャの取得を試みました。メインディスプレイ(端末を広げた状態の広い方のスクリーン)では、特に問題なく、画面キャプチャを取得できています。

次に、カバーディスプレイ(端末を閉じた状態の狭い方のスクリーン)では、端末上はアプリが正常に表示されているにも関わらず、画面キャプチャは真っ黒です。あれ、なんでやねん😇

対処への光

フォルダブルデバイスはマイナーだし、きっとまだ対応してないんだろうなくらいの気持ちで、Twitterでつぶやいたところ、 @tomoya0x00さんから、 adb shell screencapのオプションでdisplayを指定できたと思います！ という素敵なヒントをいただきました。オプションでdisplayの指定ができるのは知らなくて、これはいけそうだ！と思い、早速試しました。ありがとうございます🙏

対処方法を見つけるまでの考察

adb shell screencapのオプションで何を使えるか分からなかったので、ターミナルで、

 adb shell screencap -h

を実行して、使い方を確認しました。

usage: screencap [-hp] [-d display-id] [FILENAME]
   -h: this message
   -p: save the file as a png.
   -d: specify the physical display ID to capture (default: 19261213734341250)
       see "dumpsys SurfaceFlinger --display-id" for valid display IDs.

-dオプション でディスプレイIDなるものを指定すればよさそうです。が、そのディスプレイIDが分からんやん😇でもう１度読むと、 dumpsys SurfaceFlinger --display-id" を使うことでディスプレイIDを表示できると把握しました。

ということで、PCとFold3を接続した状態で、

 adb shell dumpsys SurfaceFlinger --display-id 

を実行しました。すると、まさに期待していた情報が表示されました(IDを念のためマスクしていますが、実際は全て数字です)😀

Display 1926XXXXXXXX0 (HWC display 0): port=130 pnpId=QCM displayName=""
Display 1926XXXXXXXX1 (HWC display 3): port=131 pnpId=QCM displayName=""

ということで、これらのディスプレイIDが、メインディスプレイとカバーディスプレイを指していそうです😋

では、いざ実行ということで、画面キャプチャを取得していきます。

フォルダブルデバイスの画面キャプチャ取得

メインディスプレイ編

• コマンド(ディスプレイIDは、環境に合わせて読み替えてください。)

adb shell screencap -p -d 1926XXXXXXXX0 /sdcard/screen.png;adb pull /sdcard/screen.png ~/Desktop/screen1.png

• 実行結果

こちらも期待通りに画面キャプチャを取得できていますね。

カバーディスプレイ編

• コマンド(ディスプレイIDは、環境に合わせて読み替えてください。)

adb shell screencap -p -d 1926XXXXXXXX1 /sdcard/screen.png;adb pull /sdcard/screen.png ~/Desktop/screen2.png

• 実行結果
  

お、真っ黒じゃないぞ！😀期待通りに画面キャプチャを取得できました。お疲れ様でした！

セカイフォン Android版 ver.9.8.1 (使い方動画の追加(Picture In Picture対応))をリリースしました。

セカイフォンは、「話した言葉をそのまま翻訳する」アプリです。「この場で翻訳」「通話で翻訳」「手ぶらで翻訳」「撮って翻訳」という4つの特徴を持っています。

セカイフォン(Android版) ver.9.8.1

使い方動画の追加(Picture In Picture対応)

AI機能を使い方の動画(PV)をアプリ内から見られるようにしました。また、Android 8.0(O)のPicture In PictureおよびAndroid 7.0(Nougat)のMulti Windowにも対応しています。

Android 8.0 (Picture In Picture)

Android 7.0 (Multi Window)

※Androidアプリ開発者向けの参考情報

(1)Android 8.0のPicture In Pictureの発表資料@potatotips第42回(2017/07/25)

(2)Android 7.0のMulti Windowの発表資料@日本Androidの会(2016/10/26)

ダウンロード

おわりに

■はじめに

potatotips第42回の発表資料(Android O (Picture In Picture)入門+実装例)@2017/07/25をアップしました。聞いていただいた方、運営の皆様、ありがとうございました。

■発表資料

当日の発表資料です。

■はじめに

LIFULL.apk #1の発表資料(Android O Beta Topics)@2017/05/26をアップしました。聞いていただいた方、運営の皆様、ありがとうございました。

某社さんのI/O報告会と日程がかぶっていましたが、最初に募集が開始されていた、こちらのイベントに参加申し込みをしていたので、予定どおり、参加させていただきました。また、先日の勉強会で知り合ったサムカワさんがイベントの主催として頑張っておられました。とても楽しい会でした＆お疲れさまでした。今後ともよろしくお願いします！

■発表資料

当日の発表資料です。