Android Kotlin ML Kit を使用してバーコード スキャン

2. Android Studio で、codescanner の方だけを、プロジェクトとして、オープンして、こちらをビルドします。
注) internal の方は、codescanner のビルド時に参照するだけなので、そのままにしておきます。
codescanner をオープンすると、Gradle 等が古いなどのガイダンスが出てきて、バージョンアップを促されるので、それに従ってすべてバージョンアップします。

3. internal は、namespace の記述が古いままでエラーになるので、新しい記述に変更します。
1) build.grade(Module:internal:chooserx) の修正。
android { .... // add by nishi namespace 'com.mlkit.example.internal' }

2) ~/AndroidStudioProjects/internal/chooserx/src/main/AndroidManifest.xml の修正。
<?xml version="1.0" encoding="utf-8"?> <!-- <manifest package="com.mlkit.example.internal"> --> <manifest> </manifest>

4. ML Kit を使用してバーコードをスキャンする（Android) の記述に従って、修正します。
1) モデルをアプリにバンドルする場合: の設定。
build.grade(Module:app) を、修正。
.... android { ..... buildFeatures { viewBinding = true } ..... } .... dependencies { .... // Use this dependency to bundle the model with your app implementation 'com.google.mlkit:barcode-scanning:17.1.0' ....

以上で、Build 出来ると思います。
後は、実機で試すと、OK じゃ!!。

しかし、ソースを見てみると、全ては、ライブラリーの中ですべて処理しているので、 自分で、なにか、カスタマイズするとかは、なにも出来ない。
ちょっと、入口が違うみたいぞね。

1) Vision
サンプルアプリ(Vision) の中にありました。
git clone でダウンロードして、mlkit/android/ の下の、vision-quickstart フォルダーを、~/AndroidStudioProjects 下へコピーして、Android Studio で、インポートして、ビルドすれば使えました。

実機にアップロードして、ML Kit Vision を起動して、
-> Run the ML Kit quickstart written in Kotlin -> LivePreviewActivity を実行して
下の、 Objeect Detction の右の▽ の中の Barcode Scanning を選べば実行出来ました。
注) LivePreviewActivity 以外でも、CameraXSourceDemoActivity 以外は、Barcode scanning が入っているようです。

プログラムの階層。
EntryChoiceActivity.kt -> LivePreviewActivity.kt

LivePreviewActivity.kt をベースに、barcodescanner の部分と、カメラ入力を使えば、自分でカスタマイズ出来そうです。

2) material-showcase
マテリアル デザイン ショーケース アプリ の方みたい。
この中に、Barcode detection - An end to end barcode scanning solution と言うのがありました。
new Material for ML design guidelines. のリンクの先の、Barcode scanning のリンクにガイダンスがありました。
しかし、こちらは、Material Design と言って、新しいデザイン形式で面倒くさそう。
しかし、バーコードの判定のオペレーションは、こちらのほうが良いみたいぞね。

5. Android CameraX に、ML Kit Analyzer を組み込んで、バーコードスキャナーを、自分で作る。..... こちらが本命。 by nishi 2023.6.10

CameraX の概要 の CameraX のスタートガイド で、CameraX アプリを作って、
その中の 6. ImageAnalysis ユースケースを実装する で、ML Kit の Barcode Scanner Detect モデルを組み込めば、出来そうです。

さっそく、おんちゃんは、こっこれを、作るぞね。!!

5.1 CameraX のスタートガイド "6. ImageAnalysis ユースケースを実装する" まで作って、 プロジェクトをコピーして、プロジェクト名を変更する。
方法は、Android Studio：プロジェクトをコピーして名前を変更する方法 を参照すると良い。
新しいプロジェクト名：CameraXBarcode_kt (何でも良い)

足りない部分の補足
1) build.gradle(Module:app)
..... android { namespace 'com.example.cameraxbarcode_kt'

2) res/values/themes/themes.xml
<resources xmlns:tools="http://schemas.android.com/tools"> <!-- Base application theme. --> <style name="Base.Theme.CameraXBarcode_kt" parent="Theme.Material3.DayNight.NoActionBar"> <!-- Customize your light theme here. --> <!-- <item name="colorPrimary">@color/my_light_primary</item> --> </style> <style name="Theme.CameraXBarcode_kt" parent="Base.Theme.CameraXBarcode_kt" /> </resources>

5.2 ML Kitで私物を認識してもらうまで(Kotlin) を参考に、ML Kit barcode scan モデルを組み込む。
この部分は、ML Kit を使用してバーコードをスキャンする（Android） が参考になる。

build.gradle(Module:app)
dependencies { .... // Use this dependency to bundle the model with your app implementation 'com.google.mlkit:barcode-scanning:17.1.0'

MainActivity.kt
..... private fun captureVideo() {} private class BarcodeAnalyzer : ImageAnalysis.Analyzer { override fun analyze(imageProxy: ImageProxy) { val mediaImage = imageProxy.image if (mediaImage != null) { val image = InputImage.fromMediaImage(mediaImage, imageProxy.imageInfo.rotationDegrees) // Pass image to an ML Kit Vision API // ... //Log.d(TAG, "called BarcodeAnalyzer(): #1 ") scanBarcodes(image) } imageProxy.close() } // copy from BarcodeScanningActivity.kt private fun scanBarcodes(image: InputImage) { // [START set_detector_options] val options = BarcodeScannerOptions.Builder() .setBarcodeFormats( Barcode.FORMAT_QR_CODE, Barcode.FORMAT_AZTEC) .enableAllPotentialBarcodes() // Optional .build() // [END set_detector_options] // [START get_detector] // val scanner = BarcodeScanning.getClient() // Or, to specify the formats to recognize: val scanner = BarcodeScanning.getClient(options) // [END get_detector] // [START run_detector] val result = scanner.process(image) .addOnSuccessListener { barcodes -> // Task completed successfully // [START_EXCLUDE] // [START get_barcodes] for (barcode in barcodes) { val bounds = barcode.boundingBox val corners = barcode.cornerPoints val rawValue = barcode.rawValue val valueType = barcode.valueType // See API reference for complete list of supported types when (valueType) { Barcode.TYPE_WIFI -> { val ssid = barcode.wifi!!.ssid val password = barcode.wifi!!.password val type = barcode.wifi!!.encryptionType Log.d(TAG, "ssid:"+ssid.toString()+" passwd:"+password.toString()+" type"+type.toString()) } Barcode.TYPE_URL -> { val title = barcode.url!!.title val url = barcode.url!!.url Log.d(TAG, "title:"+title.toString()+" url:"+url.toString()) } } } // [END get_barcodes] // [END_EXCLUDE] } .addOnFailureListener { e -> //Log.d(TAG, "scanBarcodes: error "+e) // Task failed with an exception // ... } // [END run_detector] } } .... private fun startCamera() { ...... // imageAnalyzer val imageAnalyzer = ImageAnalysis.Builder() .build() .also { // ここに追加 it.setAnalyzer(cameraExecutor, BarcodeAnalyzer()) } // Select back camera as a default val cameraSelector = CameraSelector.DEFAULT_BACK_CAMERA try { // Unbind use cases before rebinding cameraProvider.unbindAll() // Bind use cases to camera cameraProvider.bindToLifecycle(this, cameraSelector, preview, imageAnalyzer ) ...... companion object { private const val TAG = "CameraXBarcode_kt" ....

一応、これで、MlKit の barcode scan が実行できて、結果を取得できます。
ただし、今回の方法は、barcode scan の実行結果は、ログ出力になります。
プレビュー画面上に、同時に結果を出すことはできません。

ターミナルで、ログを出して、結果を、確認します。
$ adb logcat -s CameraXBarcode_kt


5.3 プレビュー画面上に、MlKit の結果を同時に出す方法。
CameraX | 高度なトピック | ML Kit Analyzer の方法を利用するようです。

以下抜粋。
.......
ML Kit Analyzer を実装する
ML Kit Analyzer を実装するには、PreviewView と連携して UI 要素を表示する CameraController クラスを使用することをおすすめします。CameraController を使用して実装すると、ML Kit Analyzer は、元の ImageAnalysis ストリームと PreviewView の間の座標変換を処理します。CameraX からターゲット座標系を受け取り、座標変換を計算し、ML Kit の Detector クラスに転送して分析します。

CameraController で ML Kit Analyzer を使用するには、setImageAnalysisAnalyzer() を呼び出し、コンストラクタに以下のものを含む、新しい ML Kit Analyzer オブジェクトを渡します。
......


CameraController を使った、サンプルがありました。
CameraX-MLKit
なんのことはない、上記を試せば、OK ぞね!!

6. メモ
1) Android Camera のサンプル
android / camera-samples
2) ML Kit での、イメージ分類の例
ML Kitで私物を認識してもらうまで(Kotlin)
3) BarcodeScanningActivity.kt