Google-дың Офлайн AI Аудармашысы Нені Жасай Алады
Автор: Wendy Frey
Жасанды интеллект әрқашан пайдалы болу үшін деректер орталығын қажет етпейді. Google-дың Gemma Аудармашысымен жүргізген соңғы эксперименті осы идеяны таңқаларлықтай нақты етеді: интернет байланысынсыз тыңдай, аудара және сөйлей алатын шағын, портативті дауыстық аудармашы.
Raspberry Pi 5 негізінде, Google-дың жеңіл Gemma 4 E2B моделіне негізделген жоба арзан компоненттер жинағын толық жергілікті AI аударма құрылғысына айналдырады. Бұл жаңа коммерциялық Google гаджеті емес, бұлттан күнделікті аппаратта AI-дің қаншалықты қабілетті болатынын көрсету үшін жобаланған ашық кодты прототип.
Ал бұл өз кезегінде аудармашыдан маңыздырақ болуы мүмкін. Gemma Аудармашысы - бұл құрылғыда AI-ға бағытталған кең ауқымды өзгерістің тағы бір мысалы, мұнда өңдеу жергілікті деңгейде жүзеге асырылады, әр сұранысты алыстағы серверге жіберудің орнына.
Google Gemma Аудармашысы неден тұрады?
Gemma Аудармашысы - Google Antigravity-дің көмегімен әзірленген ашық кодты дауыстық аударма жобасы. Оның мақсаты қарапайым: әртүрлі тілде сөйлейтін екі адамға компакт құрылғы арқылы байланысуға мүмкіндік беру.
Прототип Raspberry Pi 5, 8GB жедел жады, микрофон, динамик немесе құлаққап пен шағын дисплейді біріктіреді. Аппараттық құралды арнайы 3D-принттелген корпусқа орналастыруға болады, бұл нәтижесін кәдімгі бір тақта компьютерге қарағанда, арнайы қолмен ұстайтын аудармашыға ұқсататындай етеді.
Дегенмен, бір маңызды ерекшелік бар. Google Gemma Аудармашысын тұтынушы өнімі ретінде жариялаған жоқ. Бұл технологиялық демонстрация және ашық кодтық жоба. Код, іске қосу скрипттері мен 3D-принтке арналған корпус файлдары жүйені көбейту немесе өзгерту үшін әзірлеушілер мен энтузиастарға қолжетімді.
| Компонент | Рөлі |
|---|---|
| Raspberry Pi 5, 8GB | Жергілікті есептеу аппараттық құралы |
| Gemma 4 E2B | AI аударма |
| LiteRT-LM | Жергілікті модель уақыты |
| Moonshine | Дауысты өңдеу |
| Микрофон | Дауыстық кіріс |
| Динамик/құлаққап | Аударылған дауыс шығысы |
| Шағын дисплей | Пайдаланушы интерфейсі |
| 3D-принттелген корпус | Портативті қабық |
Офлайн AI Аудармашы қалай жұмыс істейді?
Жобаның ең қызықты тұсы - аппараттық құралдан гөрі, оның бағдарламалық қамтамасыз ету жинағының жергілікті құрамдас бөліктерге бөлінуі.
Адам микрофонға сөйлегенде, дыбыс құрылғыда өңделеді. Сөз транскрипцияланады, алынған мәтін Gemma арқылы аударылады, содан кейін аударылған сөйлем қайтадан дауысқа айналады. Республикалық қорда бұл сөйлеу танып-білу, Gemma негізіндегі аударма және мәтінді дауысты сөзге айналдыруды қамтитын жергілікті құбыр ретінде сипатталады.
Жоба екі сұхбаттық арнаға негізделген. Әр адам тіл таңдайды, өзінің фразасын жазады және екінші адамның тiлiнде аударма алады. Қазіргі іске асыруда әрекет ереже бойынша сөзді айту пернелері арқылы әрекет етеді, тұрақты тыңдаушы көмекшінің орнына.
Маңыздысы, AI нәтижесі жергілікті деңгейде орындалады. Қажетті бағдарламалық қамтамасыз ету мен модель орнатылғаннан кейін, аудармашы негізгі міндетін орындау үшін интернет байланысын қажет етпейді.
Бұл практикалық қолдануды едәуір өзгертеді. Бұлтқа негізделген аудармашы байланыс нашар болғанда сенімсіз бола алады. Офлайн құрылғы ұшақта, шалғай ауылда немесе желі инфрақұрылымы болмаған жерлерде жұмысын жалғастыра алады.
Неліктен Gemma 4 E2B маңызды?
Жобаның ортасында Google-дың шеттегі қолданбалар үшін жасалған Gemma 4 E2B үлгісі орналасқан.
Үлкен AI модельдері қуатты, бірақ әдетте едәуір компьютерлік ресурстарды қажет етеді. Кішігірім шет модельдерінің мақсаты басқаша: олар телефондарда, компьютерлерде және енгізілген аппараттық құралда тікелей жұмыс істей алу мүмкіндігі үшін кейбір масштабты құрбан етеді.
Google бұл тәсілді Gemma 4 және оның LiteRT-LM уақытымен белсенді түрде ілгерілетіп келеді. Компания LiteRT-LM Gemma модельдерін Raspberry Pi 5 қоса алғанда, кең ауқымды құрылғыларда қолдануға ыңғайлы етіп әзірленгенін айтады. Google-дың өзі E2B және E4B модельдерін шет және IoT қолданбалары үшін нұсқаулар ретінде атап өтеді.
Gemma Аудармашысы дәл осы стратегияның бенчмарка немесе әзірлеуші демонстрациясынан тыс қалай көрінетінін көрсетеді. Сөйлемді аудару үшін алыстағы AI қызметіне сұрау жіберудің орнына, Raspberry Pi AI компьютеріне айналады.
Бұл AI аппараттық құралымен ойланудың жолында маңызды өзгеріс болып табылады.
Бұлтсыз жұмыстану офлайн ғана емес
Жергілікті аударманың айқын артықшылығы - байланыс. Wi-Fi немесе мобильді сигнал болмаса, құрылғы әлі де өзінің негізгі функциясын орындай алады.
Бірақ құпиялылық, бәлкім, сондай маңызды.
Бұлтты аударма қызметімен дауыс жазбалары немесе транскрипцияланған әңгімелер өңдеу үшін құрылғыдан шығуы мүмкін. Офлайн архитектура дауысты өңдеу құбырын жергілікті аппараттық құралда сақтай алады. Сезімтал әңгімелер, жеке кездесулер немесе далалық операциялар үшін бұл елеулі артықшылық болуы мүмкін.
Бұл автоматты түрде әр жергілікті AI қолданбасын мүлдем жеке немесе қауіпсіз етеді деп айтуға болмайды. Нақты құпиялылық кепілдіктері толық бағдарламалық және аппараттық конфигурацияға байланысты. Дегенмен, дауыс деректерін алыстағы AI қызметіне жіберу қажеттілігін жою маңызды қауіптің бір категориясынан құтқарады.
Сол принцип аударма шегінен тысқа да қатысты. Жергілікті AI жеке көмекшілер, қол жетімділік құралдары, білім беру құрылғылары, өнеркәсіптік жүйелер мен желі байланысы қамтамасыз етілмейтін төтенше жағдай жабдықтары үшін пайдалы болуы мүмкін.
Google Жергілікті AI экожүйесіне қарай құрылыс жасауда
Gemma Аудармашысы Google-дың кең ауқымды шет AI стратегиясының бөлшегі ретінде қарастырылған кезде мағыналы болып келеді.
Компанияның LiteRT-LM жиналған бағдарламалық құралдары нақты генеративті AI-ды жергілікті деңгейде іске қосу үшін арнайы әзірленген. Google оны генеративті модельдер үшін оңтайландырылған мүмкіндіктері бар LiteRT технологиясының кеңейтімі ретінде сипаттайды, ал соңғы Gemma 4 жұмыстары мобильді, десктоп және IoT аппараттық құралдарында кіші модельдерді іске қосудың маңызын атап өтеді.
Raspberry Pi дәстүрлі компьютер мен енгізілген құрылғы арасында тұрғандықтан, ол ерекше қызықты. Бұл арзан, компактты және әзірлеушілерге қолжетімді. Модельдер осындай шағын аппараттық құралда пайдалы тапсырмаларды орындауға қабілетті болған кезде, мүмкін AI қолданбаларының саны dramatically кеңейеді.
Сондықтан аудармашы Google Translate-тің орнына дәлел ретінде қызықты.
Бұл маңызды сұрақты көтереді: пайдалы AI енді бұлтта өмір сүруді қажет еткенде не болады?
Google Аудармашысын өзіңіз құрастыра аласыз ба?
Ия. Жобаның ең мықты аспектілерінің бірі - Google іске асыруды ашық кодты етіп жасаған.
Ресми репозитарийде бағдарламалық код, баптау скрипттері, орналастыру конфигурациясы және 3D-принттелген корпус үшін STL файлдары бар. Аппараттық талап Raspberry Pi 5, 8GB жедел жады, дыбыстық кіріс, дыбыстық шығару және дисплейді қамтиды.
Бағдарламалық қамтамасыз етуді берілген скрипттер арқылы орналастыруға болады. Жоба Python ортасын құрады, қажетті Gemma моделін жүктейді және жергілікті қызметтерді іске қосады. Құрылғыны тұрақты киоск стиліндегі аспап ретінде конфигурациялау үшін арнайы Raspberry Pi орналастыру скрипті де бар.
Бұл Gemma Аудармашысын тек жарқын демонстрациядан артық етіп жасайды. Әзірлеушілер іске асыруды тексеріп, интерфейспен тәжірибе жасап, компоненттерді ауыстыра немесе архитектураны өздерінің шет AI жобалары үшін бастапқы нүкте ретінде пайдалана алады.
Дегенмен, айқын шектеулер әлі де бар. Құрылғы прототип болып табылады, тегістелген коммерциялық өнім емес, ал жергілікті AI өнімділігі аппараттық және бағдарламалық конфигурацияға байланысты. Raspberry Pi тек үлкен желі инфрақұрылым кластерінің теңдестірілген күш-қуаты дәрежесін ұсына алмайды.
Бірақ бұл дәл осы экспериментті қызықтырады.
Кеңірек көрініс: AI пайдаланушыға жақындап келеді
Жылдар бойы доминант AI моделі қарапайым болды: сіздің құрылғыңыз күшті серверге сұрау жібереді, сервер оны өңдейді және нәтижені қайта жібереді.
Бұл модель жоғалып кетпейді. Бұлтты AI көптеген күрделі қолданбалар үшін маңызды болып қала береді.
Бірақ Google-дың Gemma Аудармашысы сияқты жобалар баламаны көрсетеді. Модельдер кішірек және іске қосу уақыты тиімдірек болған сайын, одан да көп AI мүмкіндіктері иелігіміздегі құрылғыларға тікелей өтеді.
Аударма әсіресе жақсы көрініс болып табылады, өйткені жұмыс барысы оңай түсініледі. Сіз сөйлейсіз, AI сұрауды өңдейді, ал басқа адам нәтижені естиді. Көрінетін сервер инфрақұрылымы жоқ, және орнатудан кейін интернет байланысы қажет емес.
Сондықтан Google-дың жобасының ең маңызды бөлігі бәлкім, кішкентай аудармашыға емес, заманауи генеративті AI моделінің шағын, арзан және портативті құрылғының құрамдас бөлігі бола алатындығын көрсетуінде. Gemma Аудармашысы келесі Google Translate өнімі емес. Бұл тек бұлтқа шектелген AI-дан кейін не болатынына көз жүгірту: дербес жұмыс істей алатын, жергілікті түрде көбірек өңдеуді сақтайтын және интернет жоқ кезде де пайдалы болатын зияткерлік құрылғылар.




