פתרונות MediaPipe כוללים חבילה של ספריות וכלים, שבעזרתם תוכלו ליישם במהירות באפליקציות שלכם טכניקות של בינה מלאכותית (AI) ולמידת מכונה (ML). תוכלו לחבר את הפתרונות האלה לאפליקציות באופן מיידי, להתאים אותם לצרכים שלכם ולהשתמש בהם בכמה פלטפורמות פיתוח. MediaPipe Solutions הוא חלק מפרויקט הקוד הפתוח של MediaPipe, כך שתוכלו להתאים אישית עוד יותר את קוד הפתרונות כדי לענות על צורכי האפליקציה שלכם. חבילת MediaPipe Solutions כוללת את הדברים הבאים:
הספריות והמשאבים האלה מספקים את הפונקציונליות העיקרית של כל פתרון MediaPipe:
- MediaPipe Tasks: ספריות וממשקי API בפלטפורמות שונות לפריסת פתרונות. למידע נוסף
- מודלים של MediaPipe: מודלים שאומנו מראש ומוכנים לשימוש בכל פתרון.
הכלים הבאים מאפשרים לכם להתאים אישית פתרונות ולהעריך אותם:
- MediaPipe Model Maker: התאמה אישית של מודלים לפתרונות עם הנתונים שלכם. למידע נוסף
- MediaPipe Studio: הצגה חזותית, הערכה והשוואה של פתרונות כנקודות השוואה בדפדפן. למידע נוסף
הפתרונות הזמינים
פתרונות MediaPipe זמינים בפלטפורמות שונות. כל פתרון כולל מודל אחד או יותר, וגם חלק מהפתרונות יכולים להתאים אישית את המודלים שלהם. הרשימה הבאה מציגה אילו פתרונות זמינים בכל פלטפורמה נתמכת, ואם אפשר להשתמש ב-Model Maker כדי להתאים אישית את המודל:
| פתרון | Android | אתרים | Python | iOS | התאמה אישית של המודל |
|---|---|---|---|---|---|
| API של LLM Inference |  |
|
|
|
|
| זיהוי אובייקטים | |
|
|
|
|
| סיווג תמונות | |
|
|
|
|
| פילוח של תמונות | |
|
|
||
| פילוח אינטראקטיבי | |
|
|
||
| זיהוי של ציוני דרך בכף היד | |
|
|
|
|
| זיהוי תנועות | |
|
|
|
|
| הטמעת תמונות | |
|
|
||
| זיהוי פנים | |
|
|
|
|
| זיהוי של ציוני פנים | |
|
|
||
| עיצוב הפנים | |
|
|
|
|
| זיהוי תנוחה של ציוני דרך | |
|
|
||
| יצירת תמונה | |
|
|||
| סיווג הטקסט | |
|
|
|
|
| הטמעת טקסט | |
|
|
||
| מזהה שפה | |
|
|
||
| סיווג אודיו | |
|
|
אני רוצה לנסות
כדי להתחיל לעבוד עם MediaPipe Solutions, תוכלו לבחור כל אחת מהמשימות שמופיעות בעץ הניווט הימני, כולל משימות vision, טקסט ואודיו. אם אתם צריכים עזרה בהגדרה של סביבת פיתוח לשימוש ב-MediaPipe Tasks, תוכלו להיעזר במדריכי ההגדרה ל-Android, לאפליקציות אינטרנט ול-Python.
פתרונות מדור קודם
ב-1 במרץ 2023 הפסקנו את התמיכה ב-MediaPipe Legacy Solutions שבהמשך. כל שאר הפתרונות של MediaPipe מדור קודם ישודרגו לפתרון MediaPipe חדש. פרטים נוספים מופיעים ברשימה שבהמשך. מאגר הקודים והקבצים הבינאריים שהוגדרו מראש לכל MediaPipe Legacy Solutions ימשיכו להיות זמינים כפי שהם.
| פתרון מדור קודם | סטטוס | פתרון MediaPipe חדש |
|---|---|---|
| זיהוי פנים (מידע) | שודרג | זיהוי פנים |
| רשת פנים (מידע) | שודרג | זיהוי של זיהוי פנים |
| קשתית (מידע) | שודרג | זיהוי של זיהוי פנים |
| ידיים (מידע) | שודרג | זיהוי ציוני דרך |
| תנוחה (מידע) | שודרג | זיהוי של ציון דרך |
| הוליסטי (מידע) | שדרוג | זיהוי ציוני דרך הוליסטיים |
| פילוח של תמונת סלפי (מידע) | שודרג | פילוח של תמונות |
| פילוח שיער (מידע) | שודרג | פילוח של תמונות |
| זיהוי אובייקטים (מידע) | שודרג | זיהוי אובייקטים |
| מעקב אחרי תיבות (מידע) | התמיכה הסתיימה | |
| מעקב אחר תנועה מיידית (מידע) | התמיכה הסתיימה | |
| Objectron (מידע) | התמיכה הסתיימה | |
| KNIFT (מידע) | התמיכה הסתיימה | |
| AutoFlip (מידע) | התמיכה הסתיימה | |
| MediaSequence (מידע) | התמיכה הסתיימה | |
| YouTube 8M (מידע) | התמיכה הסתיימה |