AVSpeechSynthesizer는 SFSpeechRecognizer를 사용한 후에 말하지 않습니다

Question

그래서 SFSpeechRecognizer를 사용하여 음성 인식을 수행하고 변환 된 음성을 화면의 UITextView에 텍스트로 표시하는 간단한 응용 프로그램을 만들었습니다. 이제는 전화가 그 텍스트를 말하게하려고 노력하고 있습니다. 그것은 어떤 이유로 작동하지 않습니다. AVSpeechSynthesizer 말하기 기능은 SFSpeechRecognizer가 사용되기 전에 만 작동합니다. 예를 들어, 앱이 시작되면 UITextView에 환영 텍스트가 표시됩니다. 말하기 버튼을 누르면 전화가 환영 텍스트를 말합니다. 그런 다음 녹음을하면 (음성 인식을 위해) 인식 된 음성이 UITextView에 표시됩니다. 이제는 전화로 텍스트를 말하고 싶지만 안타깝게도 그렇지 않습니다.

여기

import UIKit 
import Speech 
import AVFoundation 


class ViewController: UIViewController, SFSpeechRecognizerDelegate, AVSpeechSynthesizerDelegate { 

    @IBOutlet weak var textView: UITextView! 
    @IBOutlet weak var microphoneButton: UIButton! 

    private let speechRecognizer = SFSpeechRecognizer(locale: Locale.init(identifier: "en-US"))! 

    private var recognitionRequest: SFSpeechAudioBufferRecognitionRequest? 
    private var recognitionTask: SFSpeechRecognitionTask? 
    private let audioEngine = AVAudioEngine() 

    override func viewDidLoad() { 
     super.viewDidLoad() 

     microphoneButton.isEnabled = false 

     speechRecognizer.delegate = self 

     SFSpeechRecognizer.requestAuthorization { (authStatus) in 

      var isButtonEnabled = false 

      switch authStatus { 
      case .authorized: 
       isButtonEnabled = true 

      case .denied: 
       isButtonEnabled = false 
       print("User denied access to speech recognition") 

      case .restricted: 
       isButtonEnabled = false 
       print("Speech recognition restricted on this device") 

      case .notDetermined: 
       isButtonEnabled = false 
       print("Speech recognition not yet authorized") 
      } 

      OperationQueue.main.addOperation() { 
       self.microphoneButton.isEnabled = isButtonEnabled 
      } 
     } 
    } 

    @IBAction func speakTapped(_ sender: UIButton) { 
     let string = self.textView.text 
     let utterance = AVSpeechUtterance(string: string!) 
     let synthesizer = AVSpeechSynthesizer() 
     synthesizer.delegate = self 
     synthesizer.speak(utterance) 
    } 
    @IBAction func microphoneTapped(_ sender: AnyObject) { 
     if audioEngine.isRunning { 
      audioEngine.stop() 
      recognitionRequest?.endAudio() 
      microphoneButton.isEnabled = false 
      microphoneButton.setTitle("Start Recording", for: .normal) 
     } else { 
      startRecording() 
      microphoneButton.setTitle("Stop Recording", for: .normal) 
     } 
    } 

    func startRecording() { 

     if recognitionTask != nil { //1 
      recognitionTask?.cancel() 
      recognitionTask = nil 
     } 

     let audioSession = AVAudioSession.sharedInstance() //2 
     do { 
      try audioSession.setCategory(AVAudioSessionCategoryRecord) 
      try audioSession.setMode(AVAudioSessionModeMeasurement) 
      try audioSession.setActive(true, with: .notifyOthersOnDeactivation) 
     } catch { 
      print("audioSession properties weren't set because of an error.") 
     } 

     recognitionRequest = SFSpeechAudioBufferRecognitionRequest() //3 

     guard let inputNode = audioEngine.inputNode else { 
      fatalError("Audio engine has no input node") 
     } //4 

     guard let recognitionRequest = recognitionRequest else { 
      fatalError("Unable to create an SFSpeechAudioBufferRecognitionRequest object") 
     } //5 

     recognitionRequest.shouldReportPartialResults = true //6 

     recognitionTask = speechRecognizer.recognitionTask(with: recognitionRequest, resultHandler: { (result, error) in //7 

      var isFinal = false //8 

      if result != nil { 

       self.textView.text = result?.bestTranscription.formattedString //9 
       isFinal = (result?.isFinal)! 
      } 

      if error != nil || isFinal { //10 
       self.audioEngine.stop() 
       inputNode.removeTap(onBus: 0) 

       self.recognitionRequest = nil 
       self.recognitionTask = nil 

       self.microphoneButton.isEnabled = true 
      } 
     }) 

     let recordingFormat = inputNode.outputFormat(forBus: 0) //11 
     inputNode.installTap(onBus: 0, bufferSize: 1024, format: recordingFormat) { (buffer, when) in 
      self.recognitionRequest?.append(buffer) 
     } 

     audioEngine.prepare() //12 

     do { 
      try audioEngine.start() 
     } catch { 
      print("audioEngine couldn't start because of an error.") 
     } 

     textView.text = "Say something, I'm listening!" 

    } 

    func speechRecognizer(_ speechRecognizer: SFSpeechRecognizer, availabilityDidChange available: Bool) { 
     if available { 
      microphoneButton.isEnabled = true 
     } else { 
      microphoneButton.isEnabled = false 
     } 
    } 
} 

Answer 1

문제는 음성 인식을 시작할 때 녹음 오디오 세션 범주를 설정 한 것입니다 코드입니다. 녹음의 오디오 세션에서 오디오 (음성 합성 포함)를 재생할 수 없습니다.

audioSession.setCategory(AVAudioSessionCategoryRecord) 

Answer 2

당신의 startRecording 방법이 줄을 변경해야합니다 :

여기

let audioSession = AVAudioSession.sharedInstance() 
      do { 

       try audioSession.setCategory(AVAudioSessionCategoryPlayback) 
       try audioSession.setMode(AVAudioSessionModeDefault) 

      } catch { 
       print("audioSession properties weren't set because of an error.") 
      } 

Here, we have to use the above code in the following way: 

@IBAction func microphoneTapped(_ sender: AnyObject) { 

     if audioEngine.isRunning { 
      audioEngine.stop() 
      recognitionRequest?.endAudio() 
      let audioSession = AVAudioSession.sharedInstance() 
      do { 

       try audioSession.setCategory(AVAudioSessionCategoryPlayback) 
       try audioSession.setMode(AVAudioSessionModeDefault) 

      } catch { 
       print("audioSession properties weren't set because of an error.") 
      } 

      microphoneButton.isEnabled = false 
      microphoneButton.setTitle("Start Recording", for: .normal) 
     } else { 
      startRecording() 
      microphoneButton.setTitle("Stop Recording", for: .normal) 
     } 
    } 

, AVAudioSessionCategoryPlayback 및 audioSession 모드 에 audioengine 우리가 audioSession카테고리을 설정하는 정지 후 당신이 음성 방법 다음 텍스트를 호출 AVAudioSessionModeDefault 그 때는 , 그것은 것입니다 잘 작동합니다. STT를 사용하는 경우

Answer 3

:

try audioSession.setCategory(AVAudioSessionCategoryRecord)    

에 :

Answer 4

문제를 해결하기위한 아래의 코드를 사용하십시오 :이 시도

try audioSession.setCategory(AVAudioSessionCategoryPlayAndRecord) 

Answer 5

, 당신은 다음과 같이 설정해야합니다 :

AVAudioSession *avAudioSession = [AVAudioSession sharedInstance]; 

if (avAudioSession) { 
    [avAudioSession setCategory:AVAudioSessionCategoryRecord error:nil]; 
    [avAudioSession setMode:AVAudioSessionModeMeasurement error:nil]; 
    [avAudioSession setActive:true withOptions:AVAudioSessionSetActiveOptionNotifyOthersOnDeactivation error:nil]; 
} 

과 같이 다시 TTS 세트 AudioSession를 사용하여 : 나를 위해 완벽하게

[regRequest endAudio]; 

AVAudioSession *avAudioSession = [AVAudioSession sharedInstance]; 
if (avAudioSession) { 
    [avAudioSession setCategory:AVAudioSessionCategoryPlayback error:nil]; 
    [avAudioSession setMode:AVAudioSessionModeDefault error:nil]; 
} 

그것의 작동합니다. 또한 LOW AUDIO 문제가 해결되었습니다.