Forskere introducerer multimodal tilgang til medicinske forespørgsler med visuelle hjælpemidler

Forskere fra IIT Patna og Stanford University har udviklet MedSumm, en multimodal tilgang, der kombinerer Hindi-engelske kodeblandede medicinske forespørgsler med visuelle hjælpemidler for at give en mere omfattende forståelse af en patients medicinske tilstand. Aman Chadha, en forsker fra Stanford University, leder holdet, der bygger Indiens første store sprogmodel for medicinsk fagterminologi (LLM) på indiske sprog, herunder Hindi. Chadha understreger behovet for LLM’er inden for sundhedssektoren og påpeger, at eksisterende modeller ikke fokuserer på indiske sprog.

Forskningsteamet benytter Open Hathi som grundlag for LLM og finjusterer det med medicinske data på indiske sprog. Chadha anerkender dog udfordringen med at inkorporere medicinsk jargon i modellen. Ved siden af ​​dette arbejde er Chadha også involveret i andre forskningsprojekter, såsom multimodal spørgsmåls-resuméering inden for sundhedssektoren.

Trods manglen på beregningsressourcer i Indien bestræber forskerne sig på at gøre datasets og AI-modeller mere effektive. Chadha nævner behovet for at overkomme begrænsninger og fremhæver vigtigheden af ​​fantasi til at drive innovation. Han bemærker, at adgangen til GPU’er er begrænset for forskere, hvilket er grunden til, at de forsøger at optimere deres modeller med de tilgængelige ressourcer.

Hvad angår tilgængeligheden af ​​data, indsamler holdet anonymiserede data for at sikre patienternes privatliv. De arbejder også på at opbygge et dataset og adoptere teknikker til oversættelse af information uden at gå på kompromis med datakvaliteten.

Chadha understreger, at Indien har masser af talent, men mangler tilstrækkelige data- og beregningsressourcer. Han opfordrer til øget offentlig finansiering for at støtte initiativer på dette område.

Forskerne har store forhåbninger til virkningen af deres arbejde og mener, at når deres modeller og datasets er tilgængelige, vil det opfordre til yderligere forskning og udnyttelse i samfundet. Bidrag fra open source vil spille en afgørende rolle i udviklingen af Indiens LLM’er.

The source of the article is from the blog foodnext.nl

Privacy policy
Contact