Android RecognitionListener: onResults вызывается дважды

10

У меня есть проект с использованием RecognitionListener, написанный на Kotlin. Функция преобразования текста в текст всегда имела успех и никогда не создавала проблем.

С прошлой недели функция onResult начала вызываться дважды. В проект не было внесено никаких изменений. Я проверил старые версии проекта (от месяцев назад), и те же проблемы.

Есть три разных случая:

  1. Маленький текст (от 1 до 8 слов) и SpeechRecognizer автоматически останавливается -> onResult () вызывается дважды;
  2. Большой текст (9 слов или более) и SpeechRecognizer автоматически останавливаются -> Нормальное поведение (onResult () вызывается один раз);
  3. Любой размер текста и SpeechRecognizer stopListening () функция вызывается вручную (из кода) -> Нормальное поведение.

Вот код речевого преобразования текста VoiceRecognition:

class VoiceRecognition(private val activity: Activity, language: String = "pt_BR") : RecognitionListener {

    private val AudioLogTag = "AudioInput"

    var voiceRecognitionIntentHandler: VoiceRecognitionIntentHandler? = null
    var voiceRecognitionOnResultListener: VoiceRecognitionOnResultListener? = null //Must have this
    var voiceRecognitionLayoutChanger: VoiceRecognitionLayoutChanger? = null

    var isListening = false

    private val intent: Intent
    private var speech: SpeechRecognizer = SpeechRecognizer.createSpeechRecognizer(activity)

    init {
        speech.setRecognitionListener(this)

        intent = Intent(RecognizerIntent.ACTION_RECOGNIZE_SPEECH)
        intent.putExtra(
            RecognizerIntent.EXTRA_LANGUAGE_MODEL,
            RecognizerIntent.LANGUAGE_MODEL_FREE_FORM
        )
        intent.putExtra(RecognizerIntent.EXTRA_LANGUAGE, language)
    }

    //It is important to put this function inside a clickListener
    fun listen(): Boolean {
        if (ContextCompat.checkSelfPermission(activity, Manifest.permission.RECORD_AUDIO) != PackageManager.PERMISSION_GRANTED) {
            ActivityCompat.requestPermissions(activity, arrayOf(Manifest.permission.RECORD_AUDIO), 1)
            return false
        }

        speech.startListening(intent)

        Log.i(AudioLogTag, "startListening")

        return true
    }

    //Use this if you want to stop listening but still get recognition results
    fun endListening(){
        Log.i(AudioLogTag, "stopListening")

        speech.stopListening()
        isListening = false
    }

    fun cancelListening(){
        Log.i(AudioLogTag, "cancelListening")

        speech.cancel()
        voiceRecognitionLayoutChanger?.endListeningChangeLayout()
        isListening = false
    }

    override fun onReadyForSpeech(p0: Bundle?) {
        Log.i(AudioLogTag, "onReadyForSpeech")

        voiceRecognitionLayoutChanger?.startListeningChangeLayout()
        isListening = true
    }

    override fun onRmsChanged(p0: Float) {
//        Log.i(AudioLogTag, "onRmsChanged: $p0")
//        progressBar.setProgress((Int) p0)
    }

    override fun onBufferReceived(p0: ByteArray?) {
        Log.i(AudioLogTag, "onBufferReceived: $p0")
    }

    override fun onPartialResults(p0: Bundle?) {
        Log.i(AudioLogTag, "onPartialResults")
    }

    override fun onEvent(p0: Int, p1: Bundle?) {
        Log.i(AudioLogTag, "onEvent")
    }

    override fun onBeginningOfSpeech() {
        Log.i(AudioLogTag, "onBeginningOfSpeech")
    }

    override fun onEndOfSpeech() {
        Log.i(AudioLogTag, "onEndOfSpeech")

        voiceRecognitionLayoutChanger?.endListeningChangeLayout()
        isListening = false
    }

    override fun onError(p0: Int) {
        speech.cancel()
        val errorMessage = getErrorText(p0)
        Log.d(AudioLogTag, "FAILED: $errorMessage")
        voiceRecognitionLayoutChanger?.endListeningChangeLayout()
        isListening = false
    }

    override fun onResults(p0: Bundle?) {

        val results: ArrayList<String> = p0?.getStringArrayList(SpeechRecognizer.RESULTS_RECOGNITION) as ArrayList<String>

        Log.i(AudioLogTag, "onResults -> ${results.size}")

        val voiceIntent: Int? = voiceRecognitionIntentHandler?.getIntent(results[0])
        if (voiceIntent != null && voiceIntent != 0) {
            voiceRecognitionIntentHandler?.handle(voiceIntent)
            return
        }

        voiceRecognitionOnResultListener!!.onResult(results[0])
    }

    private fun getErrorText(errorCode: Int): String {
        val message: String
        when (errorCode) {
            SpeechRecognizer.ERROR_AUDIO -> message = "Audio recording error"
            SpeechRecognizer.ERROR_CLIENT -> message = "Client side error"
            SpeechRecognizer.ERROR_INSUFFICIENT_PERMISSIONS -> message = "Insufficient permissions"
            SpeechRecognizer.ERROR_NETWORK -> message = "Network error"
            SpeechRecognizer.ERROR_NETWORK_TIMEOUT -> message = "Network timeout"
            SpeechRecognizer.ERROR_NO_MATCH -> message = "No match"
            SpeechRecognizer.ERROR_RECOGNIZER_BUSY -> message = "RecognitionService busy"
            SpeechRecognizer.ERROR_SERVER -> message = "Error from server"
            SpeechRecognizer.ERROR_SPEECH_TIMEOUT -> message = "No speech input"
            else -> message = "Didn't understand, please try again."
        }
        return message
    }

    //Use it in your overriden onPause function.
    fun onPause() {
        voiceRecognitionLayoutChanger?.endListeningChangeLayout()
        isListening = false

        speech.cancel()
        Log.i(AudioLogTag, "pause")
    }

    //Use it in your overriden onDestroy function.
    fun onDestroy() {
        speech.destroy()
    }

listen (), endListening () и cancelListening () все вызываются из кнопки.

Педро Энрике Флорес
источник
У меня та же проблема, проблема только на Samsung s8 с api 9 - здесь я вижу также частичные результаты, когда идет распознавание. На старых устройствах я не испытываю этого.
Марчинь
Я видел эту проблему с Android 7 и выше ... Я даже не изменил свой проект ... это только начало происходить.
Педро Энрике Флорес
«проблема только в Samsung s8 с api 9» - под этим я имел в виду свои тесты на устройствах, которые у меня есть
marcinj
1
та же самая проблема на Pocophone F1, мое решение состояло в том, чтобы проверить, идентичны ли результаты, а затем проигнорировать второй результат, если они есть
Лотан
Это только начало происходить в одном из моих приложений вчера. Я добавил логическое значение, чтобы код мог выполняться только один раз, но мне бы хотелось объяснить, почему он вдруг начал это делать. Любые обновления?
Гэвин Райт

Ответы:

3

Я нашел этот открытый вопрос: https://issuetracker.google.com/issues/152628934

Как я уже говорил, я предполагаю, что это проблема «службы распознавания речи», а не класса Android RecognitionListener.

Al-Punk
источник
Да, я тоже считаю, что это проблема ..
Педро Энрике Флорес
1

Это только начало происходить в одном из моих приложений вчера. Я добавил логическое значение, чтобы код мог выполняться только один раз, но мне бы хотелось объяснить, почему он вдруг начал это делать. Любые обновления?

Гэвин Райт
источник
0

У меня была та же проблема, и я только что добавил логический флаг в свой код, но, конечно, это временное решение, и я не знаю источника этой проблемы.

object : RecognitionListener {

        var singleResult = true

        override fun onResults(results: Bundle?) {
            if (singleResult) {
                results?.getStringArrayList(SpeechRecognizer.RESULTS_RECOGNITION).let {
                    // do something with result
                }
                // next result will be ignored
                singleResult = false
            }
        }
    }
Grobocop12
источник
Пожалуйста, добавьте пример кода.
m02ph3u5