AudioData

ชั้นเรียนสาธารณะ AudioData

กำหนดบัฟเฟอร์ริงและฟังก์ชันยูทิลิตีบางอย่างเพื่อเตรียมตัวอย่างเสียงอินพุต

โดยจะรักษาบัฟเฟอร์ริงเพื่อยึด อินพุตข้อมูลเสียง ลูกค้าสามารถป้อนข้อมูลเสียงอินพุตผ่านเมธอด "load" และเข้าถึง รวมตัวอย่างเสียงผ่านเมธอด "getTensorBuffer"

โปรดทราบว่าคลาสนี้สามารถจัดการเสียงอินพุตได้เฉพาะใน Float (ใน AudioFormat.ENCODING_PCM_16BIT) หรือ Shorts (ใน AudioFormat.ENCODING_PCM_FLOAT) เท่านั้น ระบบจะแปลงและจัดเก็บเสียงทั้งหมดไว้ภายใน ตัวอย่างในการเข้ารหัส PCM Float

การใช้งานทั่วไปใน Kotlin 

   val audioData = AudioData.create(format, modelInputLength)
   audioData.load(newData)

ตัวอย่างการใช้ AudioRecord อีกแบบหนึ่ง วันที่

   val audioData = AudioData.create(format, modelInputLength)
   Timer().scheduleAtFixedRate(delay, period) {
     audioData.load(audioRecord)
   }

ชั้นเรียนที่ซ้อนกัน

คลาส AudioData.AudioDataFormat รวมค่าคงที่ 2-3 อย่างที่อธิบายรูปแบบของตัวอย่างเสียงที่เข้ามาใหม่ ได้แก่ และอัตราการสุ่มตัวอย่าง

วิธีการสาธารณะ

คงที่ AudioData
สร้าง(รูปแบบ AudioData.AudioDataFormat, int sampleCounts)
สร้างอินสแตนซ์ AudioRecord ที่มีบัฟเฟอร์ริงที่มีขนาด sampleCounts * format.getNumOfChannels()
คงที่ AudioData
create(รูปแบบ AudioFormat, int sampleCounts)
สร้างอินสแตนซ์ AudioData ที่มีบัฟเฟอร์ริงซึ่งมีขนาด sampleCounts * format.getChannelCount()
float[]
getBuffer()
แสดงผลอาร์เรย์แบบลอยที่มีตัวอย่างเสียงที่มีอยู่ทั้งหมดใน AudioFormat.ENCODING_PCM_FLOAT เช่น
int
getBufferLength()
AudioData.AudioDataFormat
getFormat()
เป็นโมฆะ
load(short[] src)
แปลงตัวอย่างเสียงอินพุต src เป็น ENCODING_PCM_FLOAT แล้วจัดเก็บไว้ในริง กันชน
เป็นโมฆะ
load(Float[] src, intรวบรวมInFloat, int sizeInFloat)
จัดเก็บตัวอย่างเสียงอินพุต src ในบัฟเฟอร์ริง
เป็นโมฆะ
load(short[] src, int offInShort, int sizeInShort)
แปลงตัวอย่างเสียงอินพุต src เป็น ENCODING_PCM_FLOAT แล้วจัดเก็บไว้ในริง กันชน
int
load(บันทึก AudioRecord)
โหลดข้อมูลล่าสุดจาก AudioRecord ในแบบที่ไม่บล็อก
เป็นโมฆะ
load(Float[] src)
จัดเก็บตัวอย่างเสียงอินพุต src ในบัฟเฟอร์ริง

เมธอดที่รับมา

วิธีการสาธารณะ

สาธารณะ คงที่ AudioData สร้าง รูปแบบ (AudioData.AudioDataFormat, int sampleCounts)

สร้างอินสแตนซ์ AudioRecord ที่มีบัฟเฟอร์ริงที่มีขนาด sampleCounts * format.getNumOfChannels()

พารามิเตอร์
รูปแบบ AudioData.AudioDataFormat ที่คาดไว้ของข้อมูลเสียงที่โหลดลงในคลาสนี้
sampleCounts จำนวนตัวอย่าง

สาธารณะ คงที่ AudioData สร้าง (รูปแบบ AudioFormat, int sampleCount)

สร้างอินสแตนซ์ AudioData ที่มีบัฟเฟอร์ริงซึ่งมีขนาด sampleCounts * format.getChannelCount()

พารามิเตอร์
รูปแบบ AudioFormat ที่โมเดล TFLite กำหนด ช่วยกำหนด จำนวนช่องและอัตราการสุ่มตัวอย่าง
sampleCounts จำนวนตัวอย่างที่จะป้อนลงในโมเดล

สาธารณะ float[] getBuffer ()

แสดงผลอาร์เรย์แบบลอยที่มีตัวอย่างเสียงที่มีอยู่ทั้งหมดใน AudioFormat.ENCODING_PCM_FLOAT เช่น ค่าอยู่ในช่วง [-1, 1]

สาธารณะ Int getBufferLength ()

สาธารณะ AudioData.AudioDataFormat getFormat ()

สาธารณะ เป็นโมฆะ โหลด (short[] src)

แปลงตัวอย่างเสียงอินพุต src เป็น ENCODING_PCM_FLOAT แล้วจัดเก็บไว้ในริง กันชน

พารามิเตอร์
src ตัวอย่างเสียงที่ป้อนใน AudioFormat.ENCODING_PCM_16BIT สำหรับ อาร์เรย์เป็นแบบแทรกสลับ

สาธารณะ เป็นโมฆะ โหลด (Float [] src, int overrideInFloat, int sizeInFloat)

จัดเก็บตัวอย่างเสียงอินพุต src ในบัฟเฟอร์ริง

พารามิเตอร์
src ตัวอย่างเสียงที่ป้อนใน AudioFormat.ENCODING_PCM_FLOAT สำหรับ อาร์เรย์เป็นแบบแทรกสลับ
offsetInFloat ตำแหน่งเริ่มต้นในอาร์เรย์ src
sizeInFloat จำนวนค่าทศนิยมที่จะคัดลอก
การขว้าง
IllegalArgumentException สำหรับรูปแบบเสียงที่ใช้ร่วมกันไม่ได้หรือขนาดอินพุตไม่ถูกต้อง

สาธารณะ เป็นโมฆะ โหลด (short[] src, int \tInShort, int sizeInShort)

แปลงตัวอย่างเสียงอินพุต src เป็น ENCODING_PCM_FLOAT แล้วจัดเก็บไว้ในริง กันชน

พารามิเตอร์
src ตัวอย่างเสียงที่ป้อนใน AudioFormat.ENCODING_PCM_16BIT สำหรับ อาร์เรย์เป็นแบบแทรกสลับ
offsetInShort ตำแหน่งเริ่มต้นในอาร์เรย์ src
sizeInShort จำนวนค่าแบบสั้นที่จะคัดลอก
การขว้าง
IllegalArgumentException หากคัดลอกอาร์เรย์แหล่งที่มาไม่ได้

สาธารณะ Int โหลด (บันทึก AudioRecord)

โหลดข้อมูลล่าสุดจาก AudioRecord ในแบบที่ไม่บล็อก เฉพาะ รองรับ ENCODING_PCM_16BIT และ ENCODING_PCM_FLOAT

พารามิเตอร์
บันทึก อินสแตนซ์ของ AudioRecord
การคืนสินค้า
  • จำนวนค่าเสียงที่บันทึกซึ่งมีขนาด channelCount * sampleCount ถ้า ไม่มีข้อมูลใหม่ใน AudioRecord หรือเกิดข้อผิดพลาดขึ้น วิธีนี้จะแสดงค่าเป็น 0
การขว้าง
IllegalArgumentException สำหรับรูปแบบการเข้ารหัสเสียงที่ไม่รองรับ
IllegalStateException หากอ่านจาก AudioRecord ไม่สำเร็จ

สาธารณะ เป็นโมฆะ โหลด (Float[] src)

จัดเก็บตัวอย่างเสียงอินพุต src ในบัฟเฟอร์ริง

พารามิเตอร์
src ตัวอย่างเสียงที่ป้อนใน AudioFormat.ENCODING_PCM_FLOAT สำหรับ อาร์เรย์เป็นแบบแทรกสลับ