Ahoj, ľudia, vitajte v pravidelnom bulletine AI spoločnosti TechCrunch.
Minulú nedeľu, prezident Joe Biden oznámil že sa už neplánuje uchádzať o znovuzvolenie, namiesto toho ponúka „plnú podporu“ podpredsedníčke Kamaly Harrisovej, aby sa stala nominantkou Demokratickej strany; v nasledujúcich dňoch si Harris zabezpečil podporu demokratickej delegátskej väčšiny.
Harris otvorene hovoril o politike v oblasti technológií a AI; ak by vyhrala predsedníctvo, čo by to znamenalo pre americkú reguláciu AI?
Môj kolega Anthony Ha o tom cez víkend napísal niekoľko slov. Harris a prezident Biden predtým povedali, že „odmietajú falošnú voľbu, ktorá naznačuje, že môžeme buď chrániť verejnosť, alebo podporovať inovácie“. V tom čase mal Biden vydal exekučný príkaz vyzýva spoločnosti, aby stanovili nové štandardy v oblasti vývoja AI. Harris povedal, že dobrovoľné záväzky sú „prvým krokom k bezpečnejšej budúcnosti umelej inteligencie, ktorá má ešte viac prísť“, pretože „pri absencii regulácie a silného vládneho dohľadu sa niektoré technologické spoločnosti rozhodli uprednostniť zisk pred blahobytom svojich zákazníkov. bezpečnosť našich komunít a stabilita našich demokracií.
Hovoril som aj s odborníkmi na politiku AI, aby som získal ich názory. Z väčšej časti povedali, že očakávajú konzistentnosť s vládou Harrisa, na rozdiel od demontáže súčasnej politiky AI a všeobecnej deregulácie, ktorú presadzoval tábor Donalda Trumpa.
Lee Tiedrich, konzultant AI v Global Partnership on Artificial Intelligence, pre TechCrunch povedal, že Bidenova podpora Harrisa by mohla „zvýšiť šance na zachovanie kontinuity“ v politike AI v USA. „(Toto je) rámcované výkonným príkazom AI z roku 2023 a tiež poznačené multilateralizmom prostredníctvom Organizácie Spojených národov, G7, OECD a ďalšie organizácie,“ povedala. „Výkonný príkaz a súvisiace opatrenia tiež vyžadujú väčší vládny dohľad nad AI, a to aj prostredníctvom zvýšeného presadzovania, prísnejších pravidiel a politík AI agentúr, zamerania sa na bezpečnosť a určitých povinných testov a zverejňovania niektorých veľkých systémov AI.“
Sarah Kreps, profesorka vlády na Cornell so zvláštnym záujmom o AI, poznamenala, že v určitých segmentoch technologického priemyslu existuje dojem, že Bidenova administratíva sa príliš agresívne opierala o reguláciu a že výkonný príkaz AI bol „nadmerný mikromanažment“. Nepredpokladá, že by Harris zrušil ktorýkoľvek z bezpečnostných protokolov AI zavedený pod Bidenom, ale zaujíma ju, či by vláda Harrisa mohla prijať menej regulačný prístup zhora nadol, aby upokojila kritikov.
Krystal Kauffman, výskumníčka z Distributed AI Research Institute, súhlasí s Krepsom a Tiedrichom, že Harris bude s najväčšou pravdepodobnosťou pokračovať v Bidenovej práci na riešení rizík spojených s používaním AI a bude sa snažiť zvýšiť transparentnosť okolo AI. Dúfa však, že ak by Harris vyhral prezidentské voľby, vrhla by do formulovania politiky širšiu sieť zainteresovaných strán – sieť, ktorá zachytáva pracovníkov s údajmi, ktorých ťažká situácia (slabé platy, zlé pracovné podmienky a problémy s duševným zdravím) často zostáva nepriznaná.
„Harris musí do týchto dôležitých rozhovorov v budúcnosti zahrnúť hlasy dátových pracovníkov, ktorí pomáhajú programovať AI,“ povedal Kauffman. „Nemôžeme naďalej vnímať stretnutia s technickými riaditeľmi za zatvorenými dverami ako prostriedok na vypracovanie politiky. Ak to bude pokračovať, dostaneme sa na zlú cestu.“
Správy
Meta uvádza na trh nové modely: Meta tento týždeň vydala Llama 3.1 405B, model na generovanie a analýzu textu, ktorý obsahuje 405 miliárd parametrov. Jeho doteraz najväčší „otvorený“ model, Llama 3.1 405B, sa dostáva do rôznych platforiem a aplikácií Meta, vrátane zážitku Meta AI na Facebooku, Instagrame a Messengeri.
Adobe obnovuje Firefly: Spoločnosť Adobe v utorok vydala nové nástroje Firefly pre Photoshop a Illustrator, ktoré ponúkajú grafickým dizajnérom viac spôsobov, ako používať vlastné modely AI spoločnosti.
Rozpoznanie tváre v škole: Anglická škola bola formálne pokarhaná britským regulačným orgánom na ochranu údajov za to, že použila technológiu na rozpoznávanie tváre bez toho, aby od študentov získala konkrétny súhlas na spracovanie skenov tváre.
Cohere vyzbiera pol miliardy: Cohere, generatívny startup s umelou inteligenciou, ktorý spoluzaložili bývalí výskumníci spoločnosti Google, získal od investorov vrátane spoločností Cisco a AMD novú hotovosť vo výške 500 miliónov dolárov. Na rozdiel od mnohých svojich generatívnych konkurentov v oblasti AI, Cohere prispôsobuje modely AI pre veľké podniky – kľúčový faktor jeho úspechu.
Rozhovor s riaditeľom CIA AI: V rámci prebiehajúceho programu TechCrunch Séria Ženy v AI, váš skutočný rozhovor s Lakshmi Ramanom, riaditeľom AI v CIA. Hovorili sme o jej ceste k riaditeľovi, ako aj o tom, ako CIA využíva AI a o rovnováhe, ktorú treba nájsť medzi prijatím nových technológií a ich zodpovedným nasadením.
Výskumná práca týždňa
Počuli ste už o transformátore? Ide o architektúru modelu AI pre komplexné úlohy uvažovania, ktorá poháňa modely ako OpenAI GPT-4o, Anthropic’s Claude a mnoho ďalších. Ale akokoľvek sú transformátory silné, majú svoje chyby. A tak výskumníci skúmajú možné alternatívy.
Jedným z perspektívnejších kandidátov je modely stavového priestoru (SSM), ktoré kombinujú kvality niekoľkých starších typov modelov AI, ako sú rekurentné neurónové siete a konvolučné neurónové siete, aby vytvorili výpočtovo efektívnejšiu architektúru schopnú prijímať dlhé sekvencie údajov (napríklad romány a filmy). A jedna z doteraz najsilnejších inkarnácií SSM, Mamba-2, bola podrobne popísaná v a papier tento mesiac výskumnými vedcami Tri Dao (profesor na Princetone) a Albert Gu (Carnegie Mellon).
Rovnako ako jej predchodca Mamba, aj Mamba-2 dokáže spracovať väčšie množstvo vstupných údajov ako ekvivalenty založené na transformátoroch, pričom zostáva konkurencieschopná, pokiaľ ide o výkon, s modelmi založenými na transformátoroch pre určité úlohy generovania jazyka. Dao a Gu naznačujú, že ak sa SSM budú naďalej zlepšovať, jedného dňa budú bežať na komoditnom hardvéri – a budú poskytovať výkonnejšie generatívne aplikácie AI, ako sú možné s dnešnými transformátormi.
Model týždňa
V ďalšom nedávnom vývoji súvisiacom s architektúrou tím výskumníkov vyvinul nový typ generatívneho modelu AI, o ktorom tvrdia, že sa môže vyrovnať – alebo poraziť – oba najsilnejšie transformátory. a Mamba z hľadiska účinnosti.
Podľa výskumníkov môže architektúra, ktorá sa nazýva skúšobné modely tréningu (modely TTT), uvažovať o miliónoch tokenov, čo môže v budúcich prepracovaných návrhoch potenciálne rozšíriť až na miliardy tokenov. (V generatívnej AI sú „tokeny“ kúsky nespracovaného textu a iné malé časti údajov.) Pretože modely TTT dokážu prijať oveľa viac tokenov ako konvenčné modely, a to bez nadmerného namáhania hardvérových zdrojov, sú vhodné na napájanie „ generatívne aplikácie AI novej generácie, veria vedci.
Ak sa chcete hlbšie ponoriť do modelov TTT, pozrite si naše nedávna funkcia.
Uchopte tašku
Stability AI, generatívny startup AI, ktorý nedávno investori vrátane spoluzakladateľa Napsteru Seana Parkera vletel dovnútra aby zachránil pred finančným krachom, spôsobil dosť kontroverzné otázky týkajúce sa obmedzujúcich podmienok používania nových produktov a licenčných zásad.
Až donedávna bolo možné používať najnovší otvorený model obrazu AI od Stability AI, Stabilná difúzia 3komerčne si organizácie, ktoré zarábajú menej ako 1 milión dolárov ročne, museli zaregistrovať licenciu pre „tvorcov“, ktorá obmedzovala celkový počet obrázkov, ktoré mohli vygenerovať, na 6 000 za mesiac. Väčším problémom pre mnohých zákazníkov však boli obmedzujúce podmienky dolaďovania Stability, ktoré dávali (alebo sa aspoň zdalo, že dávajú) AI spoločnosti Stability právo vyberať poplatky za akýkoľvek model trénovaný na obrázkoch generovaných Stable Diffusion 3 a vykonávať nad ním kontrolu.
Ťažký prístup Stability AI viedol spoločnosť CivitAI, jedného z najväčších hostiteľov modelov na vytváranie obrázkov, k dočasnému zákazu modelov založených alebo trénovaných na obrázkoch zo Stable Diffusion 3, zatiaľ čo hľadal právnu radu ohľadom novej licencie.
„Obávame sa, že podľa nášho súčasného chápania poskytuje táto licencia Stability AI príliš veľkú moc pri používaní nielen akýchkoľvek modelov jemne vyladených na Stable Diffusion 3, ale aj akýchkoľvek iných modelov, ktoré zahŕňajú obrázky Stable Diffusion 3 vo svojich súboroch údajov. “ napísal CivitAI v a príspevok na svojom blogu.
V reakcii na spätnú reakciu Stability AI začiatkom tohto mesiaca uviedla, že upraví licenčné podmienky pre Stable Diffusion 3, aby umožnili liberálnejšie komerčné využitie. „Pokiaľ ho nepoužívate na činnosti, ktoré sú nezákonné alebo jasne porušujete našu licenciu alebo zásady prijateľného používania, Stability AI vás nikdy nepožiada o vymazanie výsledných obrázkov, jemných úprav alebo iných odvodených produktov – aj keď nikdy nezaplatíte. Stability AI,” Stabilita objasnená v a blog.
Sága poukazuje na právne úskalia, ktoré naďalej sužujú generatívnu AI – a v súvislosti s tým aj rozsah, v akom „otvorený“ zostáva predmetom interpretácie. Nazvite ma pesimistom, ale rastie číslo kontroverzne reštriktívnych licencií mi naznačuje, že priemysel umelej inteligencie tak skoro nedosiahne konsenzus – ani len kúsok smerom k jasnosti.