הגדרת אפקטים של עיבוד מקדים

הגרסה של Android 10 כוללת את הדרישות הבאות לצילום באמצעות VOICE_COMMUNICATION.

  • ביישומים צריך לספק ביטול הד אקוסטי (AEC) בנתיב הלכידה כשמבצעים לכידה באמצעות VOICE_COMMUNICATION.
  • אם מספקים AEC, צריך להיות אפשר לגלות אותו ולשלוט בו באמצעות ה-API של ה-SDK‏ AcousticEchoCanceler.

פלטפורמת Android מספקת אפקטים קוליים במכשירים נתמכים בחבילה audiofx, שזמינה למפתחים. לדוגמה, מכשיר Nexus 10 תומך באפקטים הבאים של עיבוד מקדים:

התאמה למופעים של AudioSource

ההשפעות של העיבוד המקדים משויכות למצב התרחיש לדוגמה שבו מתבקש העיבוד המקדים. בפיתוח אפליקציות ל-Android, תרחיש שימוש נקרא מופע AudioSource, ומפתחי אפליקציות מבקשים להשתמש בהפשטה AudioSource במקום במכשיר חומרת האודיו בפועל. מנהל מדיניות האודיו של Android ממפה מופע של AudioSource להגדרה של נתיב לכידה (כולל מכשיר, עוצמת קול ועיבוד מקדים) בהתאם לכללים שספציפיים למוצר. המקורות הבאים חשופים למפתחים:

  • android.media.MediaRecorder.AudioSource.CAMCORDER
  • android.media.MediaRecorder.AudioSource.VOICE_COMMUNICATION
  • android.media.MediaRecorder.AudioSource.VOICE_CALL
  • android.media.MediaRecorder.AudioSource.VOICE_DOWNLINK
  • android.media.MediaRecorder.AudioSource.VOICE_UPLINK
  • android.media.MediaRecorder.AudioSource.VOICE_RECOGNITION
  • android.media.MediaRecorder.AudioSource.MIC
  • android.media.MediaRecorder.AudioSource.DEFAULT

אפקטי העיבוד המקדים שמופעלים כברירת מחדל בכל מופע של AudioSource מוגדרים בקובץ /vendor/etc/audio_effects.xml. כדי לציין אפקטים משלכם שיופעלו כברירת מחדל בכל מופע של AudioSource, צריך ליצור קובץ /vendor/etc/audio_effects.xml ולציין בו את האפקטים לעיבוד המקדים שרוצים להפעיל. לדוגמה, אפשר לעיין בהטמעה של Nexus 10 ב-device/samsung/manta/audio_effects.xml. מופעים של AudioEffect מקבלים ומשחררים סשן כשהם נוצרים ונהרסים, מה שמאפשר לאפקטים (כמו Loudness Enhancer) להימשך לאורך הסשן.

בדוגמה הבאה מפעילים עיבוד מקדים עבור מופעי VoIP‏ AudioSource ומצלמת וידאו AudioSource. הצהרה על הגדרת AudioSource באופן הזה גורמת למסגרת לבקש אוטומטית את השימוש באפקטים האלה מ-HAL.

<preprocess>
        <stream type="voice_communication">
            <apply effect="aec"/>
            <apply effect="ns"/>
        </stream>
        <stream type="camcorder">
            <apply effect="agc"/>
        </stream>
    </preprocess>

שיפור המקור

לכוונון של AudioSource אין דרישות מפורשות לגבי הגברת עוצמת הקול או עיבוד האודיו, למעט זיהוי קולי (VOICE_RECOGNITION). הדרישות לזיהוי קולי כוללות:

  • תגובת תדר שטוחה (‎+/- 3 dB) מ-100 Hz עד 4 kHz
  • הגדרת דיבור קרוב: קריאת RMS של 90 dB SPL היא 2,500 (דגימות של 16 ביט)
  • הטראקים ברמה לינארית מ-18- dB עד 12+ dB ביחס ל-90 dB SPL
  • THD < 1% (90 dB SPL in 100 to 4000 Hz range)
  • הדרישות לגבי אולטרסאונד בתדרים נמוכים (לצורך בדיקה, אפשר לעיין במאמר בנושא בדיקות של אולטרסאונד בתדרים נמוכים):
    • תמיכה ב-SUPPORT_PROPERTY_MIC_NEAR_ULTRASOUND כפי שמוגדר בסעיף 7.8.3 של CDD.
    • תמיכה באחת או בשתי תדירויות הדגימה 44100 או 48000 ללא מסנני פס או מסננים למניעת aliasing.
  • האפקטים או העיבוד המקדים מושבתים כברירת מחדל

דוגמאות לכוונון של אפקטים שונים למקורות שונים:

  • ביטול רעשים
    • התאמה לדיכוי רעשי רוח ב-CAMCORDER
    • התאמה לסינון רעשים במצב נייח עבור VOICE_COMMUNICATION
  • שליטה אוטומטית בעוצמת הקול
    • המיקרופון מותאם לדיבור קרוב בVOICE_COMMUNICATION ובמיקרופון הראשי של הטלפון
    • התאמה לשיחות עם משתתפים מרוחקים ב-CAMCORDER

משאבים

למידע נוסף, אפשר לעיין במקורות המידע הבאים: