이번 빈에서 열린 2024 European respiratory congress에서 LLM이 의사보다 호흡기질환 진단을 더 잘한다고 (정확하게는 trainee) 발표를 했나보다. 기사를 보고 논문이 뭔지 (당연히 구두발표이므로 글은 없겠고..)몰라서 검색에 perplexity를 쓰니까 검색이 됐다. 아마 우리나라 기사는 저 AJMC에 나온 내용을 가져온듯하다. 내용을 보면 ( 호흡기는 좀 느리므로), 일반적인 진단능이 호흡기질환에서도 되냐(?)는 식으로 검증함. 구체적으로 이게 대화형으로 물어본건지 시나리오 전체를 주고 읽게한뒤 답변을 구한건지 모르겠는데, 그 비교를 소아호흡기 전공의(? trainee니까 아마)와 비교를 한 모양이다. 이 친구들도 우리와 고민이 비슷했는데, 시나리오가 해당 질환을 생각하게 하는데 적절하냐.. 는 고민을 좀 했던것 같고... 생각보다 hallucination이 별로 없었다고 답했다. 내용은 댓글에..