Een groep studenten begon vlak voor hun afstuderen in 2025 met een simpel doel: hun AI-game-engine laten werken. De modellen konden functionele spellen maken, maar die spellen waren niet leuk. De oplossing bleek simpel maar lastig: alleen mensen kunnen echt beoordelen wat leuk is. Zo ontstond het idee achter DesignArena, een tool om op grote schaal eerlijke menselijke feedback te verzamelen.

Wat is DesignArena en wie zit erachter?

DesignArena is een online dienst waarmee mensen het ontwerp en de output van AI-systemen beoordelen. De dienst is gemaakt door het bedrijf Intelligence en wordt inmiddels door 5,3 miljoen mensen gebruikt.

In korte tijd vond het team ook klanten onder bedrijven die geavanceerde AI-modellen bouwen. Die bedrijven hebben behoefte aan betrouwbare meningen van echte mensen, zodat hun modellen niet alleen technisch werken maar ook prettig en aantrekkelijk aanvoelen voor gebruikers.

Onlangs kondigde Intelligence een investeringsronde aan van 7,9 miljoen dollar, geleid door Index Ventures, met deelname van investeerders als Conviction (Sarah Guo en Mike Vernal), A*, Valkyrie en anderen.

Hoe werkt de dienst voor gebruikers en bedrijven?

Voor gewone gebruikers voelt DesignArena als een gebruiksvriendelijke beoordelingsomgeving. Je krijgt een chat-achtig venster om een verzoek of stijl aan te geven, plus keuzemenu’s voor verschillende media zoals websites en afbeeldingen. Daarna zie je meerdere varianten van een resultaat en rangschik je die van best naar slechtst via een reeks A versus B-keuzes.

Voor bedrijven is de dienst vooral waardevol omdat zij constant feedback kunnen ontvangen. Die feedback komt van echte mensen die meestal niet geven om welk AI-model het gaat; ze willen gewoon het beste resultaat. Die onpartijdige voorkeuren helpen ontwikkelaars te weten wat echte gebruikers waarderen.

Belangrijke punten:

• Gebruikers moeten inloggen om resultaten te zien, dus Intelligence kan trends volgen over tijd en per regio.

• Het platform genereert inkomsten: Intelligence rapporteert een jaarlijkse opbrengst van ongeveer 60 miljoen dollar (ARR).

• Door aan te geven welke uitvoer mensen het beste vinden, leveren gebruikers concrete aanwijzingen voor modelverbetering.

Waarom menselijke beoordelingen nog steeds nodig zijn

Geautomatiseerde tests en maatstaven draaien op grote schaal, maar zijn kwetsbaar voor manipulatie of verkeerd gebruik. Een recente inbraak bij Hugging Face toonde aan dat zulke systemen niet onfeilbaar zijn. Menselijke oordelen bieden een aanvulling: ze zijn moeilijker te faken en geven inzicht in voorkeuren die automatische scores niet vangen.

Daarnaast maken de inloggegevens van gebruikers het mogelijk om culturele en regionale verschillen te zien. Bijvoorbeeld: dashboards in Azië laten volgens Intelligence vaker een meer uitbundige, "maximalistische" stijl zien dan in andere regio’s. Zulke verschillen zijn waardevol voor bedrijven die internationaal uitrollen.

Grenzen en concurrentie

Crowdsourcing van menselijke beoordelingen lijkt aantrekkelijk, maar het is geen garantie voor succes als bedrijf. Een voorbeeld: Yupp, een concurrent die eenzelfde idee volgde, stopte dit jaar ondanks miljoenen gebruikers en 33 miljoen dollar aan investering.

Tegelijkertijd zijn er voorbeelden van succes: LM Arena, dat zich richt op tekstreacties en menselijke evaluatie, haalde in januari een Series A-opbrengst van 150 miljoen dollar, kort na de lancering van een betaald product.

Belangrijke lessen:

• Veel gebruikers betekent niet automatisch winstgevendheid.

• Klanten (vooral grote AI-ontwikkelaars) zijn bereid te betalen voor betrouwbare menselijke feedback.

• Het verzamelen van goede, niet-biased data blijft een uitdaging.

Conclusie

DesignArena begon als oplossing voor een eenvoudig probleem: hoe weet je of iets ‘leuk’ of aantrekkelijk is? Door miljoenen mensen snel en eenvoudig keuzes te laten maken, levert het platform waardevolle data voor bedrijven die hun AI-modellen willen verbeteren. Het model heeft al veel gebruikers en stevige inkomsten, en trok een nieuwe investeringsronde aan. Tegelijk laat de markt zien dat succes niet vanzelfsprekend is: menselijke evaluatie is nuttig, maar het omzetten daarvan in een duurzaam bedrijf blijft lastig.

Voor jou als lezer zonder technische achtergrond: uiteindelijk gaat het om één simpele vraag die een computer niet makkelijk kan beantwoorden—wat vinden echte mensen eigenlijk mooi of prettig? DesignArena probeert daar antwoord op te geven.