Koj puas tau hnov ntawm Moravec lub paradox? Cov kev xav tau hais tias yuav tsum muaj lub zog sib paub zoo heev rau kev txawj ntse ib qho uas tib neeg tau txais kev tso cai. Hauv essence, txoj kev ua haujlwm nyuaj rau ai dua li cov kev paub tseeb tias tib neeg lub siab tuaj yeem ua tiav. Qhov paradox tseem ceeb qhov sib txawv ntawm ai thiab tib neeg cov peev xwm ntawm lub peev xwm ntawm qib no.
Cov neeg muaj mullimodal mullimodal. Peb txhua tus zoo li ib qho kev ua haujlwm ntse tshaj plaws uas feem ntau yuav tsum tau mus kawm ntawv (cob qhia txog kev kawm thiab muaj peev xwm ua haujlwm thiab muaj sia nyob rau cov lus qhia sab nraud thiab tswj.
Peb kawm txog lub ntiaj teb ib puag ncig peb los ntawm ntau cov kev xav xws li pom, hais lus, saj, txiav txim siab, txiav txim siab, thiab ua.
Tom qab xyoo ntawm sensor fusion thiab ai evited, robots muaj ntau nruab nrog multimodal sensors nyob rau theem no. Raws li peb coj ntau laij lub zog rau ntug cov khoom siv xws li Robiats thiab kev nkag siab thiab kev sib txuas lus thiab kev sib txuas lus ntawm tus neeg hlau lub zog quab yuam, Angular velocity, thiab txawm tias lub sib nqus teb ib ncig ntawm cov neeg hlau los ntawm kev sib xyaw ntawm cov hluav taws xob, Gyroscopes & Magnetometers, thiab ntau dua.
Mus rau lub caij nyoog tshiab ntawm Robotics thiab tshuab cog lus
Ua ntej hloov pauv thiab cov qauv lus loj (LLMS), siv multimodality hauv AI feem ntau yuav tsum tau siv ntau hom cov ntaub ntawv (cov duab, suab paj nruag ntawm cov qauv sib txawv los ntawm cov txheej txheem nyuaj.
Nrog kev tawm tsam cov qauv hloov pauv thiab LLMS, ntau tus qauv tau ua ntau tus qauv los ua ib hom cov ntaub ntawv, ua rau muaj peev xwm ua tau zoo tshaj plaws ntawm kev xav txog lawv ib puag ncig. Qhov kev hloov pauv no tau zoo heev txhim kho cov efficiency thiab ua hauj lwm ntawm multialodal ai cov ntawv thov.
Thaum LLMS xws li gt -3 yog cov ntawv nyeem feem ntau, kev lag luam tau ua rau muaj kev nce qib sai sai mus rau kev ua kom muaj ntau yam. Los ntawm Openai's clip thiab dall-e, thiab tam sim no sora thiab tam sim no -4}}}}}} o, yog cov qauv uas tau hloov mus rau multimodality thiab ntau kev sib cuam tshuam ntawm tib neeg. Piv txwv, clip nkag siab cov duab ua ke nrog cov lus ntuj, yog li Bridging qhov sib txawv ntawm cov lus pom ntawm kev pom thiab cov lus qhia meej; Dall-e aim aim los ua kom muaj cov duab raws li cov lus qhia ntawm cov ncauj lus. Peb pom cov Google Gemini qauv raug cov qauv hloov zuj zus.
Xyoo 2024, multimodal evolution accelerates. Nyob rau lub Ob Hlis, qhib qhib Sora, uas tsim cov yeeb yaj kiab tiag tiag lossis kev xav ntawm cov duab qhia txog cov ntawv nyeem. Thaum koj xav txog nws, qhov no tuaj yeem muab txoj kev cog lus rau kev txhim kho thoob ntiaj teb kev sim siab, lossis dhau los ua cov cuab yeej tseem ceeb rau cov neeg sib tw. Tom qab peb lub hlis, flt {-4 o tau txhim kho kev ua tau zoo ntawm tib neeg lub sijhawm ntawm lub suab, lub zeem muag thiab cov ntawv nyeem. Ua ke cov ntawv nyeem, cov ntaub ntawv vis dis aus los cob qhia tus qauv tshiab los ntawm cov ntawv hloov pauv ntawm cov ntawv nyeem, uas nyob rau hauv lem ntau dua kev ua tau zoo.
Nyob rau hauv tib lub lis piam nyob rau lub Ob Hlis, Google tso Gemini 1.5, uas ua kom pom cov ntsiab lus teb ntev mus rau 1 lab tus neeg mus rau 1 lab. Qhov no txhais tau tias 1.5 pro tuaj yeem ua cov ntaub ntawv ntau ntawm ib zaug, suav nrog cov lus ntawm video, 11}} kab ntawm cov cai lossis 700, {9}} Lo lus.Gemini 1.5 yog ua rau Google cov kev tshawb fawb ntawm Transformer thiab cov qauv kev ua haujlwm-ua haujlwm ntawm cov qauv (MOE), thiab qhib cov qauv uas tuaj yeem siv rau ntug sab. Ntawm Google I / o Kev Sib Tham Hauv Lub Tsib Hlis, Ntxiv rau ob npaug ntawm cov ntsiab lus AI Asbative rau lub neej yav tom ntej , nkag siab cov ntsiab lus uas ib tus neeg siv tau muab tso rau, thiab cuam tshuam nrog cov neeg hauv kev sib tham hauv txoj kev sib tham hauv txoj kev sib tham.
Raws li lub tuam txhab tom qab qhib-qhov chaw LLM Llama, Meta kuj koom nrog qhov kev txawj ntse dav dav (AGI) khiav.
Qhov tseeb muaj tseeb multimodality zoo heev nce qib tshuab txawj ntse thiab yuav ua rau cov paradigms tshiab rau ntau yam kev lag luam.
Piv txwv li, cov neeg hlau siv los ua homogeneous heev, nrog qee cov sensors thiab feem ntau lawv tsis muaj cov khoom tshiab thiab hloov kho ib puag ncig tsis muaj.
Mullimodal LLMS yuav tsum tau hloov pauv cov neeg hlau kom pom zoo, yog vim li cas, tsiv lawv ntawm tshwj xeeb rau kev tsim kho. PC's, servers, thiab cov xov tooj ntse yog cov thawj coj hauv dav dav-hom phiaj suav hais txog platforms, thiab tuaj yeem khiav ntau hom kev siv software ntau yam kom ua tiav ntau yam kev ua haujlwm. Kev ntsuas kev lag luam dav dav yuav pab ntsuas kev lag luam nce, thiab cov nqi yuav tau txo qis raws li lawv nplai, ua rau lub voj voog tsim txiaj ntawm kev saws hauv ntau thaj chaw.
Elon Musk tau pom cov txiaj ntsig ntawm cov thev naus laus zis thev naus laus zis hauv 2022, tau tshaj tawm thaum kawg ntawm 2023, muaj peev xwm kawm tau ntxiv thiab kev kawm muaj peev xwm kawm tau. Tshaj yav dhau los 6-12 lub hlis, peb tau pom ntau cov kev sib tsoo hauv kev sib koom ua ke Robotics thiab Humidoid Robotics.
Tshiab thev naus laus zis tom qab tom ntej-tiam neeg hlau thiab embodied kev txawj ntse
Tsis muaj kev tsis ntseeg tias peb tseem muaj haujlwm ntau ua ntej yuav ua ntej embodied kev txawj ntse mus txog ntau ntau lawm. Peb xav tau cov qauv tsim qauv, ntev dua, thiab nrawm dua, muaj zog dua, muaj zog dua li kev txiav txim siab thiab kev tswj hwm.
Thiab peb tau txav mus rau kev tsim cov neeg hlau tib neeg hlau; Ntau txhiab xyoo ntawm cov tib neeg kev vam meej tau tsim tsa txoj haujlwm ubiquitous tsim nyog rau tib neeg thiab ib puag ncig uas yuav tsum tau ua rau tib neeg txoj kev sib thooj. Cov kab ke no yuav raug haum rau kev qias neeg, thiab kev qhia ua haujlwm hauv kev saib xyuas kev saib xyuas, thiab kev tsim kho cov lus zoo xws li cov lus teb kev puas tsuaj Cov. Cov ntawv thov HEADOID siv rau tib neeg cov cwj pwm los pab txhawb kev sib cuam tshuam ntawm tib neeg, ua rau tib neeg cov haujlwm uas nyuaj rau kev ua tiav.
Ntau lub tuam txhab kabmob AI thiab cov tuam txhab Robotics yog tso tawm cov kev tshawb fawb tshiab thiab kev cob qhia cov neeg hlau mus rau qhov laj thawj zoo dua thiab npaj ua cov chaw ua haujlwm tshiab. Raws li cov neeg siv hluav taws xob tshiab "ntawm cov neeg hlau, cov qauv uas tau txais kev nkag siab ntau ntxiv, kho lawv cov kev ua tiav ntau yam thiab ua kom zoo dua lawv cov kev ua tau zoo nyob rau hauv ntau yam ntawm cov chaw muaj zog.
Raws li qhov nthuav piv txwv zoo nkauj, Boston Dynamics 'neeg hlau dev, chaw, tuaj yeem ua raws li cov qhua, qhia lawv rau ntau yam ua yeeb yam, thiab teb lawv cov lus nug. Nws yuav nyuaj rau ntseeg, tab sis nyob rau hauv no siv kev lom zem, kev sib tham sib tham, thiab subtle kev ua yeeb yam tseem ceeb tshaj li qhov tseeb yog qhov tseeb.
Robotics Transformer: Lub hlwb tshiab ntawm Robotics
Robotics Transformer (RT) yog hloov zuj zus los txhais cov lus muaj kev sib txuas lus ntau rau hauv kev ua tau zoo. Google Clarmind's RT -2 Ua yeeb yam zoo li nws tus neeg ua ntej, muaj nyob ze 100% kev ua tiav thaum ua tiav cov haujlwm uas tau pom ua ntej. Txawm li cas los xij, thaum tau kawm nrog xibtes-e (tus qauv hlau-itiented multimal hom lus) thiab tus qauv sib xws rau cov neeg hlau), rt {} muaj kev ntsuas dav dav zoo dua Thiab Outperforms rt -1 ntawm cov haujlwm tsis pom.
Microsoft tau qhia Llava, cov lus loj-teev thiab kev pom zoo. Ameslikas tsim los rau cov ntawv nyeem raws li cov haujlwm, llava puas muaj zog lub zog ntawm cov ntaub ntawv tshiab rau cov ntaub ntawv tshiab, cov khoom sib xyaw ua ke, muaj txiaj ntsig zoo rau cov haujlwm muaj zog. Raws li nws cov lus qhia, llava teeb cov ntaub ntawv tshiab rau mullimodal sib tham thiab kev tshawb nrhiav kev tshawb fawb, twb dhau ntawm tib neeg lub peev xwm.
Raws li tau hais ua ntej, tesla lub ntsej muag rau hauv Humanoid thiab AI General tus kheej tsav (FSD) ntau lawm, tab sis kuj yog vim tias lub auto lub autopilot rau tsheb tuaj yeem siv rau neeg hlau. Tesla kuj tseem muaj cov cuab yeej tsim khoom ntse siv rau kev thov Optimus rau nws cov txheej txheem kev lag luam ntau lawm.
Caj npab yog lub hauv paus ntawm lub neej yav tom ntej ntawm Robotics
Caj npab ntseeg hais tias lub hlwb loj, ob lub hlwb loj "thiab lub hlwb loj," yuav tsum tau ua rau cov kev ua tau zoo, cov lus teb zoo dua, thiab lub zog ua haujlwm.

Robotics muaj feem ntau ntawm cov haujlwm, suav nrog cov ntsiab lus theem pib (piv txwv li cov ntaub ntawv txhais tau thiab sensor cov ntaub ntawv), thiab khiav cov ntaub ntawv multimodal tau hais dhau los. Lub CPU yog tsim nyog rau cov haujlwm dav dav, thaum Gi roj Pedals thiab Gpus tuaj yeem daws cov haujlwm ua haujlwm kom sib haum, xws li kev kawm tshuab (ml) thiab ua tiav graphics. Cov roj av ntxiv xws li cov duab teeb liab cov duab thiab cov video codec kuj tseem tuaj yeem ua ke los txhim kho cov neeg hlau lub peev xwm thiab kev cia khoom / kis tau. Tsis tas li ntawd, CPU yuav tsum muaj lub sijhawm tiag tiag-lub sijhawm thiab xav tau yuav muaj peev xwm khiav ua haujlwm xws li Linux thiab Ros pob.
Thaum txuas ntxiv rau cov khoom siv robotic, cov txheej txheem operating system kuj tseem yuav tsum tau ua haujlwm tiag tiag-ua haujlwm kom haum rau cov neeg hlau, xws li Ros, uas tuaj yeem muab Cov kev pab tsim rau cov kab ke heterogeneous suav. Peb ntseeg tias Cho yuam kev qauv thiab cov ntaub ntawv pov thawj zoo xws li muaj ntawv pov thawj thiab PSA muaj ntawv pov thawj yuav pab ntsuas kev txhim kho software. SystemReady yog tsim los xyuas kom meej tias cov qauv kev ua kom muaj kev ruaj ntseg ntawm kev ruaj ntseg thiab cov kev cai tswj hwm rau cov khoom siv sib txuas.
Kev nce qib nyob rau hauv loj-teev multimodal qauv thiab generative Ai Herald lub sijhawm tshiab hauv kev txhim kho ntawm Ai Robots thiab HUMIDOID Robots. Nrog rau ai xam thiab ecosystems thiab kev siv hluav taws xob, kev nyab xeeb, thiab kev nyab xeeb, thiab kev nyab xeeb kev nyab xeeb yog qhov tseem ceeb rau kev ua haujlwm loj tshaj plaws hauv lub sijhawm tshiab no. Caj npab processors twb tau siv dav hauv Robotics, thiab peb tos kom mus ua haujlwm ze nrog cov pob zeb ua kom zoo nkauj ua rau lub hauv paus ua ke ntawm Ai Robotics.




