תוֹכֶן

• כיצד פועל הליבה העצבית של הפיקסלים?
• מה יכול הליבה העצבית לעשות?
• גל העתיד

Google Pixel 4 ו- Pixel 4 XL מתהדרים בתכונות התוכנה הטובות ביותר של החברה ויכולות מצלמה אי פעם, אשר מתאפשרות, בין השאר, בגלל הכללת ה- Core Neural Core. השבב הקטן הזה יושב לצד המעבד הראשי של ה- Pixel 4 כדי להפעיל ביעילות את עומסי העבודה הלמידה של המכונה של גוגל. אלה נעים בין עיבוד תמונה ליכולות זיהוי קולי ותמלול.

הגרעין העצבי הוא לא הסדק הראשון של גוגל במעבד ללימוד מכונות ביתי לסמארטפונים. הפיקסלים 2 ו -3 נשלחו עם ה- Pixel Visual Core, שנועדו להוריד משימות הדמיה כמו HDR + לשיפור הביצועים והיעילות האנרגטית. ליבת העצבים של פיקסל 4 בונה על בסיס זה עם יכולות משופרות ומבחר מקרי שימוש חדשים.

אל תחמיץ: זה מה שמצב האסטרו של Pixel 4 יכול לעשות

כיצד פועל הליבה העצבית של הפיקסלים?

גוגל טרם שיתפה פרטים על המתרחש בדיוק בתוך הליבה העצבית שלה. עם זאת, אנו יודעים כיצד פועל הדור הקודם של Visual Core שלו וסוג הטכניקות המשמשות בדרך כלל במעבדי למידת מכונות (ML).

בניגוד למעבד מסורתי הבנוי לטפל במגוון רחב של משימות חישוביות, מעבדי למידת מכונות (NPU), כמו הליבה העצבית, מותאמים למעט משימות מתמטיות מורכבות ספציפיות. זה הופך אותם יותר למעבדי אותות דיגיטליים (DSP) או יחידות עיבוד גרפי (GPU) אך מותאמים לפעולות הספציפיות המשמשות את אלגוריתמי למידת מכונה.

צבור כפול ממולא הוא פעולת הדמיה וקולית ML נפוצה מאוד שלא תמצאו תמיכה בהיקפים רחבים בתוך מעבד. בניגוד למעבדי CPU ו- 32 סיביות מודרניים, פעולות אלה מבוצעות בגדלי נתונים של 16, 8 ואפילו 4 ביטים בלבד. בלוקים לחומרה מותאמים אישית נדרשים כדי לתמוך בפעולות אלה ביעילות מירבית.

הליבה העצבית מאיצה אלגוריתמי תמונה וקול הפועלים בצורה פחות יעילה במעבד או GPU.

הליבה העצבית בונה יחידות לוגיקה אריתמטיות ייעודיות לחומרה כדי להתמודד עם הוראות אלה במהירות ובצריכת חשמל מינימלית, במקום לקחת מחזורי מעבד מרובים. השבב מורכב ככל הנראה ממאות ALUs אלה בליבות מרובות, עם זיכרון מקומי משותף, ומעבד מיקרו המפקח על תזמון המשימות.

Google בוודאי בצע אופטימיזציה לעיצוב החומרה האחרון שלה סביב אלגוריתמי תוכנת המסייע, הקול וההדמיה. התלות ביכולות ה- ALU של ה- Neural Core היא הסיבה לכך שתכונות הצילום האחרונות של Pixel 4 לא יעשו את דרכן למכשירים ישנים יותר.

מה יכול הליבה העצבית לעשות?

נראה כי הגרעין העצבי הוא מרכיב מרכזי במספר פונקציות חדשות ארוזות ב- Google Pixel 4 ו- Pixel 4 XL. שיפורים אלה מתרכזים בעיקר בעיבוד תמונה וקול.

בצד הצילום, הרשימה כוללת בקרות חשיפה כפולות, מצב צילום אסטרופ, תצוגה מקדימה של HDR + ו- Night Sight. ה- Pixel 4 של גוגל מבצע התאמות חשיפה כפולות ו- HDR + בזמן אמת, כך שמשתמשים יוכלו לראות את תוצאות התמונות שלהם לפני שהם פוגעים בתריס. זה מצביע על עלייה משמעותית בכוח החישוב לתמונות לעומת ה- Pixel 3.

בנוסף, מכשירי הטלפון הללו מכניסים איזון לבן מבוסס למידה במערכת המצלמות שלה, שמתקן גוונים צהובים הקשורים לעיתים קרובות לתמונות קלות. לכידת חשיפה מרובה, גילוי שמים ושילוב תמונות משמשים למצב של אסטרו לילה ראיה, הדורשים כמות רבה של עיבוד וזיהוי תמונות. לבסוף, התכונה 'פרצופים פנים' של Pixel 4 מזהה וממליצה על תמונות טובות יותר של אנשים שאתה מצלם לעיתים קרובות.

ה- Pixel 4 מתהדר גם באסיסטנט מעודכן, המודלים מודלים של שפות משופרות שיכולות כעת לפעול באופן טבעי במכשיר ולא בענן. תכונות קוליות חדשות כוללות גם שיחות ממשיכות, שעתוק אודיו דרך אפליקציית המקליט, וזיהוי דיבור משופר. גם הליבה העצבית ממלאת תפקיד גם בטכנולוגיית נעילת הפנים התלת-ממדיות של הטלפון.

גל העתיד

הליבה העצבית של גוגל היא החלק החזק ביותר של סיליקון הסמארטפון הביתי של החברה עד כה, ומאפשרת עריכת תמונות בזמן אמת יעילה יותר מבעבר. גוגל מתגאה בטכנולוגיות למידת המכונות המובילות בתעשייה שלה ונקודות המכירה הגדולות ביותר של Pixel 4 מסתמכות על פירות ההשקעות הללו.

עם זאת, ה- Pixel 4 אינו הסמארטפון היחיד המספק מעבד ללימוד מכונות חזק. כל הסמארטפונים המופעלים באמצעות Snapdragon 855 מציעים חומרת לימוד מכונה ייעודית. למרות שלגוגל יש בבירור צרכים שונים ואולי אפילו דרישות חזקות יותר לסמארטפונים שלה. באופן דומה, קירין 990 של Huawei מתהדר ב- NPUs כפול בתוך הבית חזק מספיק לאפקטים של וידאו בוקה בזמן אמת ועוד.

חומרת למידת מכונה הופכת במהירות לאבן יסוד ביכולות הדימוי, הווידיאו וה- AI של סמארטפון. גוגל, עם ה- Pixel 4 וה- Neural Core שלה, ממוקמת ממש בסמוך לראש האריזה.

הבא הבא: מצלמות הפיקסלים של גוגל לא מנסות להיות מצלמות כלל