Bloomberg traint AI-model op veertig jaar aan eigen financiële data

BloombergGPT is vergelijkbaar met ChatGPT - een tekstrobot ook wel generatieve AI genoemd - maar dan gespecialiseerd in financiële teksten. "Vanwege alle redenen die generatieve LLM's aantrekkelijk maken - snel leren, tekstgeneratie, conversatiesystemen etc. - zien we enorme waarde in het ontwikkelen van het eerste LLM gericht op het financiële domein," zegt Bloomberg CTO Shawn Edwards in bericht op de eigen site.

Bloomberg had daarbij het voordeel dat het bedrijf zelf beschikt over een archief van veertig jaar aan historie over beursontwikkelingen, bedrijfsinformatie en andere historische financiële data.

Zelf gebouwd

Het LLM is niet een doorontwikkeling van een van de bestaande, algemeen getrainde LLM's, maar door Bloomberg van de grond af aan opgebouwd. Het beschikt over 50 miljard parameters, een maat voor de complexiteit van het neurale netwerk. Ter vergelijking: GPT-4, de voorloper van de huidige basis onder ChatGPT heeft ongeveer 1 biljoen parameters, zijn voorloper GPT-3 175 miljard parameters en Google's PaLM 540 miljard. Maar omdat BloombergGPT vooral getraind is op de financiële data, presteert het in benchmarkstudies beter op financiële vraagstukken dan de algemene modellen zoals GPT-3.