Keskustelua yliskaalaustekniikoista ja frame generaatiosta Nvidia Dlss, Amd Fsr, Intel Xess, Lossless Scaling

[BoomerX]

kannattaako tuota Jensenin haastattelua katsoa ? ymmärtääkö lex mitään asiasta jos jensen sumuttaa ja höpisee markkinointi osaston materiaalia ?
JRE jakso tuli osittain katsottua kun se oli ennemminkin sellainen tarina tuokio nvidian historiasta ja jotain haaveilua AI tulevaisuudesta.

muok. pikaisella vilkaisulla teknisempi haastattelu. Kovasti AI sitä AI tätä.

 

[pomk]

Ensinnäkin, haasteltava ei ole kehittäjä vaan PR-heppu, joka vastailee jonkun dialogipuun mukaisesti. Sen informaatio asiasta ylipäätään saattaa olla rajatumpi kuin kehittäjätiimin ja toimarin.

Kappas. Jos tosiaan noihin vastattiin PR tyypin toimesta niin sit aika moinen pannukakku koko kysymysten mahdollistaminen nvidialta. Onko tämä nyt tietoa vai sinun mutua?

Toiseksi, haastattelussa ei suoraan puhuttu treenaamisesta ja promptaamisesta. Kun kysytään tavoista kontrolloida systeemiä, PR NPC listaa blendiä, gammaa ja muita artistin käytössä olevia numikoita ja sitten lisää: "We continue to talk to developers to understand all the ways they would like to control the technology".

kysyttiin että miten voi vaikuttaa lopulliseen kuvaan. Vastauksena annettiin lista asioita, eikä ”esimerkiksi näin, ja lista asioita”. Ei annettu lainkaan ymmärtää että mitään muuta toiminnallisuutta olisi. Esim. promptaus olisi ollut melko olennainen asia kertoa jos sellainen olisi mahdollista.

Satuilu ja päästä keksiminen tarkoittaa kyllä vähän muuta kuin että "AMD julkisti viime viikolla 123X prosessorin. Tänään tj. Lisa Su keksi päästään että prosessori on tulossa myyntiin syyskuun 1. päivä". Parempi ilmaisu olisi ilmoitti tai kertoi. Ei toki yhtä dramaattinen.

Heh. Hieman eri asia. Jensseni myös jo todistetusti satuili aiemmin tuon käkättimen toiminnasta.

No niin. No sehän olisi sitten kuitenkin vaan sitä ihan samaa AI sloppia ja paskaa vai kuinka?

Luonnollisesti.

"AI paska" ja "artistin vision" tuhuoavat muutokset peleihin tuntuu olevan ihan ok, kunhan sen on tehnyt joku yksittäinen nörtti luolasssaan, eikä iso paha NVIDIA.
Tämmöistä kuraahan ei saa missään nimessä varsinkaan tuoda peliin valittavissa, ja alkuperäisen artistin customoimana olevana optiona. Sen pitää pysyä täysin eriilisenä, kolmannen osapuolen tekemänä, erikseen ladattavana ja asennetavana modina.

Onhan tää sillä tavalla totta, että ei mulla ole mitään sitä vastaan että joku fani tekee megatissimodin skyrimiin. Ihmettelisin ihan yhtä paljon kuin tämän superslopperin kohdalla jos nvidia toisi ajureihinsa jonkun automaattisen tissiensuurennus-DLSS:n.

 

[Halpuuttaja]

Hieman eri asia. Jensseni myös jo todistetusti satuili aiemmin tuon käkättimen toiminnasta.

Eipä oikeastaan. Toimari tekee väittämiä tulevaan tuotteeseen liittyen. Tässä vaiheessa kun ei ole vielä tietoa kuinka toden mukaisia noi väittämät on, on niiden kutsuminen päästä keksityiksi on vääristelyä, ehkä jopa satuilua.

Ja nythän me keskusteltiin siitä promptaamisesta ja treenaamisesta mistä Jensen puheli Lexin haastiksessa. Tämä pivotti Jensenin aiempiin puheisiin nyt on puhdas red herring, elikkäs kömpelöä rimpuilua.

 

[pomk]

Eipä oikeastaan. Toimari tekee väittämiä tulevaan tuotteeseen liittyen.

Virheellisiä väittämiä muunmuassa mallin geometria2geometria luonteesta. Mutta joo, luotettava kaveri ja ennen kaikkea tietää tulevasta tuotteesta kaiken.

Tässä vaiheessa kun ei ole vielä tietoa kuinka toden mukaisia noi väittämät on, on niiden kutsuminen päästä keksityiksi on vääristelyä, ehkä jopa satuilua.

Ja nythän me keskusteltiin siitä promptaamisesta ja treenaamisesta mistä Jensen puheli Lexin haastiksessa.

Edelleen, 50€ vetoa että jenssenin tuoreimpia hallusinaatioita mm. promptaamisesta ym. ei dlss5:stä tule löytymään jos se saapuu markkinoille ilmoitetussa aikataulussa.

 

[P c L A Y E R]

Onhan tää sillä tavalla totta, että ei mulla ole mitään sitä vastaan että joku fani tekee megatissimodin skyrimiin. Ihmettelisin ihan yhtä paljon kuin tämän superslopperin kohdalla jos nvidia toisi ajureihinsa jonkun automaattisen tissiensuurennus-DLSS:n.

No niin. Vihdoin rehellistä puhetta. Eli ongelma ei ole lähtökohtiasesti ole siinä mitä ruudulla näkyy, vaan siitä miten se on toteutettu.

Eipä enää lisättävää aiheeseen. Jokainen voisi vähän miettiä, onko tämmösen optionaalisen asian tuominen ihan pelin valikkooja iohan niiden sen pelin omien devaajien "kontrolloimana" niin iso asia, että pitää näin voimakkaasti reagoida. Ihan sama onko siinä käytetty AI:ta.

 

[pomk]

Vihdoin rehellistä puhetta. Eli ongelma ei ole lähtökohtiasesti ole siinä mitä ruudulla näkyy, vaan siitä miten se on toteutettu.

Ehkä kuitenkin tärkeimpänä että kuka sen toteuttaa. Se että miten se on toteutettu voi joissain tapauksissa olla olennaista, jos toteuttaja on joku megakorpo, faniprokkiksissa ei jaksa kiinnostaa.

Jokainen voisi vähän miettiä, onko tämmösen optionaalisen asian tuominen ihan pelin valikkooja iohan niiden sen pelin omien devaajien "kontrolloimana" niin iso asia, että pitää näin voimakkaasti reagoida. Ihan sama onko siinä käytetty AI:ta.

miksi tätä järjetöntä sloppia pitää voimakkaasti puolustellakkaan toisaalta?

Täällä olis nvidia soturit puolustelemassa megatissi featureakin varmaan jos nvidia sen toisi markkinoille. Double D-LSS. Jenssenin pitchaamalla vapaalla promptaamisella sekin on syksyllä mahdollista.

 

[Dark82]

Oma mielipide on se että jos pelistä saadaan todella näyttävän nököinen niin ihan sama miten se näyttävyys on toteutettu. Innolla odotan mitä DLSS 5 tuo tullessaan.

 

[Noctrl]

Oma mielipide on se että jos pelistä saadaan todella näyttävän nököinen niin ihan sama miten se näyttävyys on toteutettu. Innolla odotan mitä DLSS 5 tuo tullessaan.

Ei, sen pitää näyttää sahalaitaiselta, omata suttuset tekstuurit ja olla ihan surkean näköistä ja ei mitään keinotekoisia feikki ruutuja, pitää olla laskettu raskaasti ja pyöriä 30 fps. Pitää myös olla elämäntapa artesaanin (joka juo laatu italialaista kahvia) muokkaamat monitorin puiset reunukset, että siitä voi nauttia. Olet väärässä

 

[Maniac]

Jensseni avasi tätä vissiin hieman lisää Lex Fridmanin haastattelussa:

Tämän sisällön näkemiseksi tarvitsemme suostumuksesi kolmannen osapuolen evästeiden hyväksymiseen.
Lisätietoja löydät evästesivultamme.

Hyväksy kolmannen osapuolen evästeet

Linkki: https://youtu.be/vif8NQcjVf0?si=Y3gX07gloujltt8c&t=6505


En ole sitä itse ehtinyt käydä läpi, mutta tällaista lisäinfoa siitä oli joku kerännyt:

• the model itself will be open to developers, not purely pre-baked and static weights;
• training and tuning the model on your own dataset will be a normal practice and expectation;
• you'll even be able to simply prompt it, with either words or possible even with example images if you don't want to do a full training

Näyttää siis siltä, että kehittäjät pystyvät kouluttamaan esim. omaan pelimateriaaliin pohjautuvan LoRAn tai kokonaan tuunatun mallin siitä Nvidian pohjaversiosta. Ja varmaan tulee myös jossain vaiheessa modaajien saataville, ja siinä vaiheessa tuskin artistien tunteet enää kiinnostaa.

Jensen valehtelee yhä, ettei DLSS5 muuta mitään textuureja alkuperäiseen frameen nähden, vaikka Daniel Owen näytti videossaan toisin. Myös 3D guided väite on puhdasta paskaa, koska DLSS5 inputit ovat 2d frame ja motion vectorit. Eli kuinka luotettavana pidät herran jatkossa esittämiä väitteitä, jos jo puheenvuoron alku oli silkkaa tuubaa?

"AI paska" ja "artistin vision" tuhuoavat muutokset peleihin tuntuu olevan ihan ok, kunhan sen on tehnyt joku yksittäinen nörtti luolasssaan, eikä iso paha NVIDIA.
Tämmöistä kuraahan ei saa missään nimessä varsinkaan tuoda peliin valittavissa, ja alkuperäisen artistin customoimana olevana optiona. Sen pitää pysyä täysin eriilisenä, kolmannen osapuolen tekemänä, erikseen ladattavana ja asennetavana modina.

Miksi ylläpidät moista valheellista narratiivia, vai etkö edelleenkään ymmärrä eroa peliä tehdessä vrt. pelin julkaisun jälkeen julkaistavat modit?

Jos omaa silmää miellyttää DLSS5 tuottama enemmän valokuva/videomainen tyyli, missä jäljitellään näennäisesti photorealismia, niin keneltä se on pois?
Jos joku olis tehnyt vastaavan vaikka reshadena, (mikä luonnllisesti ei ole edes mahdollista), niin tässä ei olisi kenelläkään mitäään ongelmaa. Kyllä itse pelaisin ainakin zorahissa (jos se olisi siis peli) ennemmin tuolla DLSS5:lla terästettyä versiota, kun tuota alkupeäistä seepiafiltteröidyn näköistä versiota.

NVIDIA DLSS 5: Zorah Tech Demo GeForce RTX Comparison: NVIDIA DLSS 5 On vs. NVIDIA DLSS 5 #004

NVIDIA DLSS 5: Zorah Tech Demo GeForce RTX Comparison: NVIDIA DLSS 5 On vs. NVIDIA DLSS 5 #004

www.nvidia.com

Näkemäni DLSS5 implementaatiot ovat olleet liikkeessä niin surkeaa katsottavaa, niin ihmettelen suuresti kuinka kukaan muu kuin nVidian kovin fanikunta pelaisi pelejään tuolla tapaa. Tähän kun lisätään vielä naurettavat laitevaatimukset (dedikoitu RTX5090) niin ei voi todeta muuta kuin DOA, uusi yritys myöhemmin aidolla pelimoottorin 3D informaation hyödyntämisellä, jonka jälkeen tästä saataisiin aivan varmasti eri tavalla hyötyjä irti. Nyt on puhtaasti kyseessä glorifioitu instagram-filtteripaske. Vaikea nähdä että tästä saadaan kunnollista lopputulosta kun inputteja on yksinkertaisesti liian vähän laadukkaan lopputuloksen tuottamiseksi, mutta jotain näkyväähän on pakko nVidiankin saada aikaan valtavien AI-satsausten jälkeen.

No niin. Vihdoin rehellistä puhetta. Eli ongelma ei ole lähtökohtiasesti ole siinä mitä ruudulla näkyy, vaan siitä miten se on toteutettu.

Eipä enää lisättävää aiheeseen. Jokainen voisi vähän miettiä, onko tämmösen optionaalisen asian tuominen ihan pelin valikkooja iohan niiden sen pelin omien devaajien "kontrolloimana" niin iso asia, että pitää näin voimakkaasti reagoida. Ihan sama onko siinä käytetty AI:ta.

Mistä tiedät että kyseessä on optionaalinen asia? Kova on luotto Jenseniin edelleen vaikka herra todistetusti valehtelee niin että korvat heiluu. Jos se AI pystyy säilyttämään pelin alkuperäisen lookin ainoastaen ehostaen yksityiskohtia, niin silloinhan ei ongelmaa olisi. Nyt se ei siihen kykene paskomatta pelin artistic intenttiä tehden peleistä geneeristä huttua ja ihmettelet että tämä ei jengille maistu? Syö sä vaan niitä Hesen hamppareita jatkossakin, mut älä turhaan ihmettele jos muut haluaa hamppareitaan laadukkaampana toiselta toimittajalta.

 

[Halpuuttaja]

Edelleen, 50€ vetoa että jenssenin tuoreimpia hallusinaatioita mm. promptaamisesta ym. ei dlss5:stä tule löytymään jos se saapuu markkinoille ilmoitetussa aikataulussa.

Tossa sun uljaassa vetotarjouksessa olis jotain ideaa, jos mä olisin tässä se, joka on ottanut vahvasti kantaa sen suhteen, onko Jensenin Lexille kertomat asiat aidosti suunnitteilla olevia ominaisuuksia vai syljen suuhun tuomaa sepitystä.

Ja Jensen ei btw sanonut että promptaaminen on ominaisuutena syksyn launchissa vaan epämääräisesti "in the future".

Mä pidän ihan mahdollisena, että mies puhui paskaa eikä malli tule olemaan manipuloitavissa kuten hän kuvaili. Mutta kun mitään varmuutta sulla tai mulla ei ole, miltä DLSS 5:n roadmap näyttää, on mun mielestäni aika hönöä lähteä satuilemaan että asia on varmasti niin tai näin.

 

[pomk]

Tossa sun uljaassa vetotarjouksessa olis jotain ideaa, jos mä olisin tässä se, joka on ottanut vahvasti kantaa sen suhteen, onko Jensenin Lexille kertomat asiat aidosti suunnitteilla olevia ominaisuuksia vai syljen suuhun tuomaa sepitystä.

Ja Jensen ei btw sanonut että promptaaminen on ominaisuutena syksyn launchissa vaan epämääräisesti "in the future".

Mä pidän ihan mahdollisena, että mies puhui paskaa eikä malli tule olemaan manipuloitavissa kuten hän kuvaili. Mutta kun mitään varmuutta sulla tai mulla ei ole, miltä DLSS 5:n roadmap näyttää, on mun mielestäni aika hönöä lähteä satuilemaan että asia on varmasti niin tai näin.

Eli yli 50% luottoa ei löydy sieltäkään sitten jenssenin satuiluille. Noh, ei sinänsä yllätä

Oon sinänsä samaa mieltä siitä että on täysin mahdollista että jenssen on aina sanonut pelkkää faktaa ja kyse ei ole saduista, mutta pidän moista merkittävästi epätodennäköisempänä vaihtoehtona.

Vapaasti promptattava geometria2geometria neuroverkko olis tosi kova juttu ja mahdollistaisi dlss5 pre bake työkalut. Vieläpä yhdistettynä siihen että kyseinen malli on avoin ja jatkotreenattavissa, kuten viimeisimmässä haastattelussa sammakoitiin. Avoin promptattava tesselaattori voisi olla johonkin käyttöön aika kova systeemi.

 

[finWeazel]

Pelien tulevaisuus voi hyvin olla AI promptattu geometria ja tekstuurit. Vettä saa virrata joessa, että toimii reaaliaikaisena. Worldlabsilla systeemi mikä generoi kuvasta/promptista/videosta 3d mallin tekstuureineen. Worldabsista voi exportata meshinä/gaussian splattina esim. ue5:een ja käyttää pelin kenttänä tai mainoksessa taustana. Maailmamallit aika uus juttu, wordlabs lienee ensimmäinen iso, julkaistiin nelisen kuukautta sitten

Indie devaaja vois bulkkiassettien ostamisen sijaan worldlabsilla promptata peliin 3d-assetit.

Marble | World Labs

Create and share 3D worlds with Marble

marble.worldlabs.ai

 

[maneman]

Näissä DLSS pöyristymissä on samanlainen kaiku kuin ihmiset usein sanovat monesta aiheesta että x oli vielä ymmärrettävää mutta nyt kun on y niin se menee jo ihan liian pitkälle. Kun taas jotkut harvat ovat älynneet jo silloin kun x, että y tulee x:n jälkeen. Näin myös omalla kohdallani kävi kun DLSS ja G sync tulivat kuvioihin.

Ei ole myöskään mitään syytä olettaa että mielensä pahoittaminen Nvidian AI teknologioista poistaisi Nvidian monopolimaisen aseman pelinäytönohjain markkinoilla. AMD on koittanut laittaa kampoihin hintakamppailulla, ei ole ollut mitään vaikutusta. Myös Intel koittanut samaa, ei vaikutusta.

Joten vaikka ei pitäisi esim. DLSS5 teknologiasta, jotain sen tapaista on takuuvarmasti Nvidia monopolilta kuitenkin tulossa. Ja luultavasti paljon "pahempaa" läheisessä tulevaisuudessa. Mutta ainahan on retro pc:t, retrokonsolit ja retropelaaminen jos valtavirta pelialan kehitys vahvasti AI teknologioiden suuntaan ei miellytä tai jopa raivostuttaa. Jos ei sitten halua raivota ja mieltä pahoittaa ihan vaan vaikka ajan kuluksi.