AI Index Report, BloombergGPT a kmotr umělé inteligence o LLMs i AGI
Začátek dubna 2023 přinesl nové modely, zásahy regulátorů a řadu poznatků z akademické sféry.
Vítejte u 2. vydání Miton AI Newsletteru, jehož cílem je shrnovat to nejdůležitější z posledního vývoje v AI – pohledem businessu. Velikonoce, Nevelikonoce.
Dnes se podíváme mj. na:
🎓 Zjištění ze stanfordského AI Index Reportu
💵 BloombergGPT – nový LLM pro svět financí
⚯ Nový model od Mety Segment Anything
🧠 Co říká kmotr AI o současném stavu AI a taky AGI
🤔 Jak využívat GPT-4 jako pomocníka pro myšlení a rozhodování
P.S. Pokud ještě newsletter neodebíráte, přihlaste si odběr ⬇️.
🚀 Hlavní zprávy
Stanfordský AI Index Report 2023
Počet nově založených AI společností v 2022 dle země
⬆️ Při reflexi stejného reportu z loňska bývalý guvernér ČNB Singer poznamenal, že EU v AI propadá. Data z roku 2022 v tomto ohledu nepřináší nic nového.
3 největší oblasti investic do AI v 2022 byly: 1) zdravotnictví ($6.1B); 2) data management, processing a cloud ($5.9B); 3) fintech ($5.5B).
LLMs stále rostou v parametrech i nákladech na trénink. GPT-2 (2019) měl 1.5 mld. parametrů a jeho trénink stál $50,000. PaLM, jeden z největších modelů (2022), měl 540 mld. parametrů a jeho trénink stál $8M —PaLM tak byl 360x větší než GPT-2 a stál 160x více.
AI začíná budovat lepší AI a dle reportu to zrychlí její vývoj (viz Twitter sekce a vlákno AutoGPTs ⬇️).
Nový model od Mety: Segment Anything
Model využívá pokročilou technologii počítačového vidění a umožňuje extrakci objektů z obrázků a videí, a to jedním klikem. Meta nabízí demo, kde si to můžete jednoduše vyzkoušet.
BloombergGPT je LLM pro finance
Model má 50 mld. parametrů a byl navržený pro řešení finančních úloh: Jak lze vidět z tabulky, oproti obecným modelům by měl zvládat finanční úlohy lépe.
K tréninku využili dataset o velikost 363 mld. tokenů, dosud největší doménově specifický dataset (60x větší než Wikipedia).
Model najde využití v analýze sentimentu, poznání entity, klasifikace zpráv a odpovídání na otázky – v rámci Bloomberg Terminálu. Bude tam ale “skrytě”, nikoli jako konverzační UI.
a ještě ..
Finský AI lab Silo.AI zakládá SiloGen, iniciativu, jež má vytvářet další evropskou alternativu v LLM a posilovat evropskou digitální nezávislost. Největší soukromá AI laboratoř v Evropě tak chce podobně jako německý Aleph Alpha ukázat, že to jde i jinak: se zaměřením na ochranu dat a specifické use-casy v různých odvětvích.
Expedia spouští svého AI travel chatbota. Nejenže mají ChatGPT plugin, nyní nabídnou uživatelům možnost chatu přímo ve své aplikaci.
Amazon spouští AWS Generative AI Accelerator: 10 týdnů programu a podpory, kredity na AWS, demo day a přístup ke komunitě a kapitálu.
💰Investice
🇺🇸 Benchmark investuje $10M do Langchainu v rámci seed kola.
🇺🇸 Index Ventures vede $75M Series C do robotických pickerů Covariant.
🇬🇧 Medwise, 'Google pro doktory', získává financování $1.3M.
🇬🇧 Hazy, enterprise platforma poskytující syntetická data, získává $9M v rámci Series A.
🇩🇪 Coqui získává $3.3M seed financování na svůj text-to-speech nástroj, jenž umí emoční zabarvení.
🇩🇪 nyris, vyhledávač obrázků jako SaaS, získává $10M v rámci Series A.
🇫🇷 NuMind, absolventi YC, kteří staví platformu umožňující B2C a B2B zákazníkům vytvářet vlastní NLP modely, uzavřeli seed kolo ve výši $3M.
🇩🇰 Teton vytváří AI asistenta pro zdravotní personál a nyní získává $5.3M v rámci seed financování.
🇫🇮 Inven získává $1.5M na svůj AI datový nástroj pro M&A týmy.
🛠️ AI prakticky
GPT-4 je vynikající asistent pro přemýšlení, řešení problémů a rozhodování. Whartonský profesor Ethan Mollick popisuje několik situací, kdy může být k užitku.
Pre-mortem scénář (co se může pokazit, pokud udělám X).
Náklady obětované příležitosti (o co přicházím, pokud se rozhodnu pro X).
Překonávání myšlenkových klamů (jak lépe/produktivněji můžu přemýšlet o X).
Pro GPT-4 experimentování doporučuji i následující: 1) SWOT analýza, 2) pozitiva/negativa, 3) cost-benefit analýza, 4) seznam nejsilnějších argumentů protistrany, 5) popsat rozhodnutí, které potřebuji udělat – a požádat o framework/proces/mentální model, který vede k optimálnímu výsledku.
📚 Co číst, vidět, slyšet a studovat
▶️ Výborný rozhovor s Geoffreym Hintonem (42 min.), jedním z největších průkopníků AI. Dává odpovědi na otázky, které se teď řeší všude: jak LLMs fungují (není to jen autocomplete?), jaká rizika plynou z AGI a kdy tu bude, jaká je šance, že to bude pro lidstvo game over? Stojí za zhlédnutí celé.
🇨🇿 Stanislav Fořt vede vývoj LLMs ve Stability AI a v rozhovoru CC přibližuje svou obdivuhodnou profesní cestu (Cambridge, Stanford, DeepMind, Anthropic). Konkurenta ChatGPT od Stability můžeme prý očekávat v řádu měsíců.
📕 Nvidia vydala e-book o generativní AI a jejím využití ve velkých firmách. Obsahuje množství use-casů, nástrojů a zdrojů pro další průzkum. Inspirace pro hledání příležitostí v B2B.
🎓 LinkedIn Learning nabízí zhruba 100 AI kurzů zdarma, a to až do půlky června.
䷉ 4letý plán Anthropicu na vytvoření nového modelu a boj s OpenAI.
🐦 Twitter vlákna, co stojí za to projít
Už jste slyšeli o AutoGPTs? Výborné 🧵ukazuje, jak může vypadat cesta k AGI. Vše, co je potřeba, jsou 3 GPTs-4 s různými zadáními (tvorba úkolů, prioritizace, exekuce) a pamětí.
Příklady AI produktů postavených na Vercelu ve 🧵. Vercel je v současnosti velmi populární platforma pro front-end vývoj.
🐦 … a 3 tweety k zamyšlení
Poslední rok v technologiích připomíná, že i s malým týmem se dají budovat obrovské věci. I v AI. (Tým OpenAI má ~400 lidí).
Platíte si GPT-4? Za těch pár dolarů ten rozdíl opravdu stojí!
Minulý týden Itálie, nyní zvažuje zákaz ChatGPT Německo a další státy EU. Opačný přístup volí např. Indie – regulaci AI neplánuje.
🤖 a 👬
Vysvětlení od GPT-4:
To je z prvního dubnového vydání vše. Pro další novinky sledujte náš Twitter, LinkedIn či blog.
A pokud se vám newsletter líbil, přihlaste si odběr a sdílejte jej prosím dál.
Moc díky za vaši pozornost!
Za Miton, František Dalecký