Grok on Muskin xAI:n ensimmäinen kielimalli
Grok on Muskin xAI:n ensimmäinen kielimalli
Lisäksi: Midjourneyssä voi nyt tuunata tyylejä
Huomenta! ☕
Transistori on arkiaamuisin ilmestyvä teknologiauutisiin ja internet-kulttuuriin keskittyvä uutiskirje, jota sponsoroi ohjelmisto- ja datakonsultointipalveluja tarjoava Three Point Consulting. Klikkaa Transistori tilaukseen ja pysy kartalla teknologiamaailman tuoreimmista käänteistä!
Uutiset 🗞️
Grok on Muskin xAI:n ensimmäinen kielimalli
Elon Muskin X-brändinsä alle perustama tekoälytutkimusyksikkö xAI julkisti viikonloppuna ensimmäisen tekoälymallin ja samannimisen chatbotpalvelun, Grokin.
Grok on tarkoitus tuoda Twitterin (eli X:n) premium -tilaajille. X.ai:n julkistuksessa mainitaan, että Grok -malli on puolet pienempi kuin Metan julkaisema Llama-2, mutta se suoriutuu monissa vertailuissa yhtä hyvin tai paremmin kuin Metan malli. Grokille on myös tarkoitus syöttää jatkuvasti uutta tietoa Twitteristä, jolloin sen on tarkoitus olla paremmin ajan tasalla.
Grok is an AI modeled after the Hitchhiker’s Guide to the Galaxy, so intended to answer almost anything and, far harder, even suggest what questions to ask!
Grok is designed to answer questions with a bit of wit and has a rebellious streak, so please don’t use it if you hate humor!
A unique and fundamental advantage of Grok is that it has real-time knowledge of the world via the 𝕏 platform. It will also answer spicy questions that are rejected by most other AI systems.
Grok is still a very early beta product – the best we could do with 2 months of training – so expect it to improve rapidly with each passing week with your help.
…
After announcing xAI, we trained a prototype LLM (Grok-0) with 33 billion parameters. This early model approaches LLaMA 2 (70B) capabilities on standard LM benchmarks but uses only half of its training resources. In the last two months, we have made significant improvements in reasoning and coding capabilities leading up to Grok-1, a state-of-the-art language model that is significantly more powerful, achieving 63.2% on the HumanEval coding task and 73% on MMLU.
GM on investoinut Cruiseen n. 600 miljoonaa per vuosineljännes
The New York Times (NYT) julkaisi viikonloppuna perusteellisen raportin automoituja takseja rakentavasta Cruise Automationista, joka joutui hiljattain keskeyttämään toimintansa San Franciscossa, tapaturman vuoksi.
Cruisen omistaa autojätti General Motors (GM) ja lehden mukaan GM on viimeisen vuoden aikana rahoittanut Cruise 588 miljoonan dollarin edestä joka vuosineljännes. Luku on kasvanut 42 % vuoden takaisesta. Cruisen autot ovat GM:n valmistamia Chevrolet Bolteja ja yhden auton valmistaminen maksaa n. 150 000 - 200 000 dollaria.
Lisäksi yhtä autoa seuraa ja tarvittaessa etäohjaa keskimäärin 1,5 työntekijää ja NYT:n tietojen mukaan työntekijät joutuvat puuttumaan autojen toimintaan 2,5 - 5,0 mailin välein.
G.M. has spent an average of $588 million a quarter on Cruise over the past year, a 42 percent increase from a year ago. Each Chevrolet Bolt that Cruise operates costs $150,000 to $200,000, according to a person familiar with its operations.
Half of Cruise’s 400 cars were in San Francisco when the driverless operations were stopped. Those vehicles were supported by a vast operations staff, with 1.5 workers per vehicle. The workers intervened to assist the company’s vehicles every 2.5 to five miles, according to two people familiar with is operations. In other words, they frequently had to do something to remotely control a car after receiving a cellular signal that it was having problems.
To cover its spiraling costs, G.M. will need to inject or raise more funds for the business, said Chris McNally, a financial analyst at Evercore ISI. During a call with analysts in late October, Ms. Barra said G.M. would share its funding plans before the end of the year.
Teknologiajätit vaativat vapautta tekijänoikeusmateriaaleille
Mainitaan vielä, että Yhdysvaltojen patenttivirasto on vastaanottanut julkisesti kommentteja siitä, pitäisikö maan tekijänoikeuslakeja muuttaa suhteessa tekoälymallien koulutukseen.
Kaikki suurimmat teknologiayritykset lähettivät patenttivirastolle mietelmän asiasta ja kaikkien kanta tuntuu olevan, että tekoälymalleja pitäisi pystyä kouluttamaan tekijänoikeussuojatulla materiaalilla ilman, että materiaalista pitäisi maksaa esimerkiksi lisenssejä. The Vergeltä:
The US Copyright Office is taking public comment on potential new rules around generative AI’s use of copyrighted materials, and the biggest AI companies in the world had plenty to say. We’ve collected the arguments from Meta, Google, Microsoft, Adobe, Hugging Face, StabilityAI, and Anthropic below, as well as a response from Apple that focused on copyrighting AI-written code.
There are some differences in their approaches, but the overall message for most is the same: They don’t think they should have to pay to train AI models on copyrighted work.
Google esimerkiksi vertaa tekoälymallien kouluttamista tekijänoikeuksilla suojatun materiaalin kanssa kirjan lukemiseen:
If training could be accomplished without the creation of copies, there would be no copyright questions here. Indeed that act of “knowledge harvesting.” to use the Court’s metaphor from Harper & Row, like the act of reading a book ‘and learning the facts and ideas within it, would not only be non-infringing, it would further the very purpose of copyright law. The mere fact that, as a technological matter, copies need to be made to extract those ideas and facts from copyrighted works should not alter that result.
Suosittelut 🕵️
Midjourneyssä voi nyt tuunata tyylejä
Midjourney julkaisi viime viikolla uuden ominaisuuden nimeltä style tuner, jolla palvelun tyylejä voi itse hienosäätää.
Tuunaamisessa ei tässä tapauksessa ole kyse itse neuroverkkojen hienosäätämisestä, vaan palvelulle annetaan ensin syöte jonka pohjalta Midjourney luo yhteensä 32 kuvaparia. Käyttäjä saa sitten itse valita kuvapareista, ne joiden tyylistä tämä pitää ja valittujen kuvien pohjalta luodaan sitten räätälöity tyyli.
Toimintoa käytetään Midjourneyn Discord -botin /tune -komennon kanssa. Itse syötin alla komennolle syötteen an editorial photo of an art gallery with contemporary art in paris, france, minkä jälkeen sain linkin sivustolle jossa voin valita kuvaparit.
Sivustolla neuvotaan, että kaikkia kuvapareja ei tarvitse käydä läpi, mutta mitä enemmän niitä valitsee sen hienovaraisempi tyyli on mahdollista luoda. Sivustoja voi myös jakaa muille käyttäjille, ja pariisilaisen taidegalleriaesimerkkini löytää täältä. Jokaisesta tyylistä saa lopulta oman tunnistenumeron, jota voi sitten käyttää omissa syötteissään. Käyttämällä tyylitunnistetta alkuperäiseen syötteeseen, saan luotua alla olevan kuvan pariisilaisesta, modernin taiteen taidegalleriasta:
Tyylejä voi käyttää vapaasti missä tahansa syötteissä. Alla esimerkkejä saman tyylin käyttämisestä piirroksessa, jossa kissa leikkii Lissabonin kaduilla ja roska-autosta Lontoossa:
Nopeet 🚀
Tänään järjestettävä OpenAI:n kehittäjäkonferenssi on viikon odotetuin tekkitapahtuma. Twitterissä on analysoitu väitettyjä vuotoja OpenAI:n suunnitelmista ja koko tapahtuma livestriimataan alkaen klo 20.00 Suomen aikaa.
Yhteenveto trendeistä avoimenlähdekoodin tekoälytutkimuksessa vuonna 2023.
Peliyhtiö Blizzardin vuosittainen Blizzcon -tapahtuma järjestettiin viime viikolla, ja yhtiö mm. kertoi uusista lisäosista World of Warcraftiin ja Diabloon.
Labrassa geenimuunneltu hyttynen näyttää vähentävän Dengue -infektioita Etelä-Amerikassa.
Hämmentävästi, kielimallien (olemattomiin) tunteisiin vetoavat syötteet näyttävät tuottavan malleilta verrattain parempia vastauksia.
lol.