Digital Healthcare | 최윤섭의 디지털 헬스케어

ChatGPT vs. 의사 : 누가 환자의 질문에 대답을 잘할까 - 최윤섭의 디지털 헬스케어

[논문] ChatGPT vs. 의사 : 누가 환자의 질문에 대답을 잘할까

최윤섭 / 7월 4, 2023

지난 4월에 JAMA Intern Med에 출판되었을 때 꽤 화제(?)가 되었던 논문인데 이제서야 리뷰해봅니다. 환자의 임상적인 질문에 대해서 ChatGPT와 의사의 답변을 비교하여, 누가 더 양질의 & 공감력 높은 답변을 해주는지를 살펴본 논문입니다. 비록 methodology 측면에서 여러 한계가 있지만, 많은 시사점을 주는 연구라고 할 수 있습니다. 환자의 질문은 미국판 디씨인사이드..라고 할 수 있는, 레딧의 환자가 물어보고 의사가 답하는 게시판 (Reddit’s r/AskDocs)을 활용하였습니다. 여기에 올라온 환자의 질문과 의사의 답변 195개를 무작위로 추출하여, ChatGPT (GPT-3.5)의 답변과 비교하였습니다. (ChatGPT에 물어볼 때는 질문마다 fresh session에서 진행.) 이러한 의사의 답변과 ChatGPT의 답변은 blind 처리하여 세명의 의사가 평가하였습니다. 일단은 두가지 답변 중에 어느 쪽이 더 나은가? 를 평가하였고, […]

ChatGPT는 어려운 질병 케이스를 얼마나 잘 진단할까 - 최윤섭의 디지털 헬스케어

[논문] ChatGPT는 어려운 질병 케이스를 얼마나 잘 진단할까

최윤섭 / 6월 26, 2023

최근 JAMA에는 ChatGPT의 어려운 진단 케이스에 대한 감별진단 성능을 평가한 논문이 소개되었습니다. ChatGPT의 의료적 성능을 테스트하기 위해서 USMLE (미국 의사 면허 시험) 문제를 풀게 하는 등의 시도들은 있었지만, 의사들도 진단을 내리기 어려워하는 케이스들로만 테스트해본 적은 드물었다고 합니다. 이 아티클에서는 NEJM의 clinicopathologic conferences 에 나오는 케이스들을 활용했습니다. 여기에는 교육을 목적으로 병리학적으로 최종 진단이 내려진 어려운 케이스들이 소개됩니다. 먼저, 2023년의 7개 케이스를 통해서 ChatGPT가 여러 가능성 있는 진단명을 확율에 따라 랭킹을 매겨서 결과를 내어놓도록 프롬프트를 만들었습니다 (아래 그림 참고). 그리고, 2021년 1월부터 2022년 12월까지의 70개의 케이스를 입력하여 ChatGPT로 감별진단을 진행해보았습니다. 케이스가 너무 길어서 ChatGPT에 입력이 안되거나, diagnostic dilemmas에 해당되지 않는 케이스들은 제외되었습니다.

VR 기반의 디지털 치료제, CMS의 청구 코드를 발급 받다

최윤섭 / 4월 2, 2023

페어 테라퓨틱스의 주가 하락과 M&A 매물로 나왔다는 소식으로 디지털 치료제 업계가 뒤숭숭한 가운데, 최근 좋은 소식도 하나가 있었습니다. VR 기반의 DTx 회사인 AppliedVR의 허리 통증 완화 솔루션 RelieVRx 에 대해서 CMS에서 아래의 HCPCS Level II 를 새롭게 발급했습니다. E1905: A new HCPCS billing code for virtual reality-based medical devices that use cognitive behavioral therapy CMS로부터 자사의 특정 DTx에 대한 신규 개별 billing code를 받는 것은 몇년 전부터 Pear Therapeutics도 시도해오던 것입니다만 (reSET, reSET-O, Somryst 에 대해서 각각 코드를 발급 받으려 했었음) CMS를 계속 설득하지 못했었는데요. 이는 기존의 CBT 기반 HCPCS 코드와의 차별성을 보여주지 못했기 때문입니다. 이번 AppliedVR의 RelieVRx는 소프트웨어 뿐만이

복지부의 ‘바이오헬스 신시장 창출 전략’을 환영하며 (+ 분석 및 코멘트)

최윤섭 / 3월 11, 2023

최근 복지부에서 ‘바이오헬스 신시장 창출 전략‘을 대대적으로 발표했습니다. 바이오헬스 및 디지털 헬스케어를 ‘제2의 반도체’ 수준으로 육성할 수 있는 방안을 마련하라는 대통령의 지시에 따라서, 디지털 신시장 창출, 바이오 헬스 수출 활성화라는 목표 달성을 위해 5대 핵심 과제로 구성된 전략을 보건복지부 주도로 수립한 것입니다. 이 발표 내용을 꼼꼼하게 읽어보니 엄청나게 흥미로운 부분이 많습니다. 특히 이번 정책 방향의 핵심에는 디지털 헬스케어가 있습니다. 이렇게 디지털 헬스케어 관련 아젠다가 많은 정책 발표를 보니 정말 감회가 새롭기까지 합니다. (제 기억에는 정부 정책에 디지털 헬스케어가 이렇게 중심적으로 등장한 적은 없었던 것 같습니다.) 자세한 내용은 전문을 읽어보시기를 권해드리며, 제가 읽으면서 발견했던 몇가지 흥미로운 부분들을 메모하고, 제 생각도 정리해보도록 하겠습니다.

“헬스케어 스타트업” 트레바리 북클럽 멤버를 모집합니다!

최윤섭 / 3월 1, 2023

많은(?) 분들이 기다리시던 트레바리 북클럽 ‘헬스케어 스타트업: CEO / C-level’ 의 새로운 시즌의 멤버를 받습니다. 이제 신청하실 수 있습니다! 저는 스타트업의 성패는 대표자 및 C-level 이 경영자로서 얼마나 성장하느냐에 크게 좌우된다고 믿고 있습니다. 이를 위해 헬스케어 스타트업 대표님/이사님들만 모여서 경영학 도서를 읽고 토론하면서, 경영자로서의 역량도 기르고, 서로 고민도 공유하며, 네트워킹도 하기 위한 자리입니다. 이 북클럽을 하는 이유 대해서 더 자세히 알고 싶으시면 아래의 글을 확인하시기 바랍니다. 바쁜 창업가들을 모아서 북클럽을 하는 이유 제가 나름대로(?) 엄선한 4권의 경영서를 매달 한 권씩 읽고, 만나서 토론하는 것을 이번 4월부터 7월까지 4개월 동안 진행합니다. 또한 매달 주제에 맞는 선배 창업가/전문가들을 특별 게스트로 초청합니다. (지금까지

국내 1호 디지털 치료제 허가에 부쳐

최윤섭 / 2월 16, 2023

드디어 한국에서도 식약처가 승인한 첫번째 디지털 치료제(디지털 치료기기, digital therapeutics)가 나왔습니다. 바로 에임메드가 개발한 불면증 치료 목적의 애플리케이션 ‘솜즈’입니다. 불면증 환자를 치료하기 위한 인지행동치료(CBT) 기법에 기반한 소프트웨어 의료기기(SaMD) 입니다. 솜즈는 잘 증명되어 있는 불면증에 대한 인지행동 치료에 기반합니다. 수면습관 교육, 피드백, 행동 중재 등을 통해서 6~9주간 수면의 효율을 높여서 불면증을 개선합니다. 예를 들어, 수면 일기 작성, 수면 제한 요법 등을 통해서 불면증 증상 개선을 이끌어낸다고 합니다. 몇년 전부터 국내에서는 디지털 치료제에 대한 열풍이 불었는데요. 2020년 식약처에서 디지털 치료제를 정의하기 위한 가이드라인이 나온 이후, 국내에서는 10개 이상의 디지털 치료제가 식약처의 임상시험 계획 승인을 받고 임상시험을 진행 중이었습니다. 그 결과 지난 12월

[DHP 디지털 헬스케어 아카데미 2023] 수강생을 모집합니다!

최윤섭 / 1월 30, 2023

디지털 헬스케어 전문 투자사, 디지털 헬스케어 파트너스(DHP)에서 디지털 헬스케어 분야에 대한 전문 교육 과정인 ‘DHP 디지털 헬스케어 아카데미 2023 (5기)’를 개설합니다. 이번으로 5기째를 맞는 DHP 아카데미는 이번 4월부터 총 13주 과정 (네트워킹 2회 포함)으로 진행되며, 매주 목요일 저녁 2시간씩 ZOOM으로, DHP 파트너들을 비롯한 디지털 헬스케어 분야 최고 전문가들이 강의합니다. 강의 주제는 디지털 헬스케어 개론부터, 의료 인공지능, 디지털 치료제, 원격의료, 의료 메타버스 등 디지털 헬스케어 분야의 주요 주제부터, 디지털 헬스케어 스타트업, 규제, 급여, 사업모델, UX, 벤처 투자 등 산업적인 주제까지 모두 커버합니다. 또한 활발한 네트워킹 기회를 제공하여, 디지털 헬스케어 업계 내부로 진입하실 수 있는 기회도 제공합니다. 이번 기수 수강생들 뿐만 아니라,

ChatGPT, 미국 의사 면허 시험(USMLE)을 통과할 수 있다!

최윤섭 / 1월 24, 2023

OpenAI의 대화형 챗봇 인공지능 ChatGPT가 최근 몇주 동안 엄청난 화제를 불러일으키고 있습니다. ChatGPT는 채팅을 하듯이 사용자가 질문을 텍스트로 입력하면, 그에 대한 답을 텍스트로 알려주는 서비스입니다. 이전에도 이런 기술이 없었던 것은 아니지만, ChatGPT는 이전 챗봇의 성능을 훨씬 뛰어 넘습니다. 어려운 질문이나, 창의적인 질문에 대해서도 답을 내어 놓고, 심지어는 그럴듯한 논문도 ChatGPT로 쓸 수 있습니다. ChatGPT는 텍스트 기반의 챗봇 형식의 인공지능이기 때문에, 의학 분야에서는 어떻게 활용될 수 있을지 궁금했는데요. (사실 좀 찾아봐도 많이 안 나옵니다.) 최근 한 연구에 따르면 ChatGPT가 미국 의사 면허 시험(USMLE)을 무난히 통과할 정도의 실력(?)을 가진 것으로 드러났습니다. Ansible Health라는 실리콘밸리의 병원 연구자들이 진행한 연구인데요. 정식으로 출판되지는 않고 medRxiv에

2022년의 디지털 헬스케어 벤처 펀딩 트랜드

최윤섭 / 1월 15, 2023

Rock Health에서는 매분기, 매년 벤처 투자 시장의 레포트를 내고 있습니다. 미국과 글로벌 시장의 분위기를 잘 파악할 수 있는 레포트여서 매번 챙겨봅니다만, 이번에 나온 2022년 전체를 정리한 펀딩 레포트는 시기적으로 특히 중요하다고 생각해서 꼼꼼하게 읽어 보았습니다. 최근의 이 레포트에 나온 내용 중에 인상 깊게 봤던 것들 일부를 정리해보려고 합니다. 이제는 코로나19 특수로 인한 디지털 헬스케어 펀딩 시장의 호황은 글로벌 경기 침체와 더불어서 (혹은 경기 침체 때문에) 사그라들고 있습니다. 엔데믹으로 돌입하고 있는 지금의 시기가 디지털 헬스케어 벤처 펀딩 시장이 맞고 있는 또 하나의 변곡점이라는 생각이 듭니다. 원래 오르막이 있으면 내리막이 있는 법이고, 호황이 있으면 불황의 사이클이 있기 마련입니다. 저희야 죽으나 사나 디지털

복지부의 디지털 치료제 건강 보험 적용 방안에 대한 분석

최윤섭 / 10월 6, 2022

최근 복지부와 심평원에서 디지털 치료제에 대한 건강보험 적용 방안에 대해서 고민의 결과를 조금씩 내어놓고 계십니다. 디지털 치료제 (디지털 치료기기)가 워낙 관심을 많이 받는 분야이다보니, 아직 식약처에서 인허가 받은 1호 디지털 치료제가 나오지 않았음에도, 심평원에서는 선제적으로 대응하고 있으신 것으로 보입니다. 디지털 치료제는 결국 소프트웨어 의료기기(SaMD)이기 때문에 한국 산업계에서는 건강보험 급여가 어떤 방식으로, 얼마나 책정되는지에 따라서 사업성 뿐만 아니라, 이 분야 자체의 흥망이 달려 있다고 볼 수 있습니다. 따라서 관련 분야에 계신 분들은 심평원에서 급여 정책을 어떻게 세우는지가 초미의 관심사일 수밖에 없습니다. 아직 최종적으로 확정된 안은 아닙니다만, 복지부와 심평원에서 최근에 발표하신 내용을 들어보면, 그동안 관련 급여에 대해서 규제 당국이 어떤 고민을

아마존의 헬스케어 진출 전략

최윤섭 / 10월 1, 2022

최근 아마존의 헬스케어 진출 전략이 잘 정리되어 있는 WSJ 기사가 있어서 소개해드리려고 합니다. 지난 몇년 동안 아마존이 헬스케어에 매우 활발하게 진출하고 있는데요. 사실 버크셔 헤서웨이, JP모건과 함께 야심차게 준비했다가 결국 중단한 헤이븐(Haven)에 이어서, 올 연말까지만 서비스를 운영하겠다는 Amazon Care에 이르기까지 적어도 지금까지는 아마존의 이름에 걸맞는 성공적인 성과를 보였다고 말하기는 어렵습니다. 그럼에도 아마존에게 헬스케어는 그냥 지나치기는 불가능한 너무도 큰 기회입니다. 이번에 인수한 One Medical 만 봐도 그러하고, (비록 결과적으론는 CVS에게 돌아갔습니다만) 재택 의료 회사 Signify Health의 인수전에 아마존이 참전한 것도 같은 맥락입니다. 한 가지 흥미로운 분석은 아마존의 전략은 최근 시장에서 여러 스타트업과 대형사들이 취하는 접근법과 다소 차이가 있다는 것입니다. 많은 회사들이 (적어도

디지털 치료제의 아킬레스건?

최윤섭 / 8월 8, 2022

디지털 치료제에서 가장 큰 도전 과제 중의 하나는 결국 engagement와 attrition이 될 것입니다. 최근에 Frontiers in Phsychiatry 에 출판된 논문, ‘Digital therapeutics for mental health: Is attrition the Achilles heel?’ 은 이러한 점을 잘 지적하고 있습니다. (관련한 STAT+ 아티클) 이 논문은 현재 FDA 인허가를 받고 시장에 출시되어 있는 페어 테라퓨틱스의 세가지 디지털 치료제와 알킬리 인터렉티브의 디지털 치료제에 대한 pivotal trial 논문을 메타분석했습니다. 이를 통해 심지어 이렇게 시장의 대표적인 디지털 치료제들마저 engagment 및 attrition 이슈에 대해서 충분한 검증이나 해결이 이뤄지지 않았다는 것을 이야기 합니다. 디지털 치료제에 대한 임상 연구들을 보면 낮은 engagment 및 높은 attrition 은 고질적인 문제입니다. 임상 연구에 참여하는

[인터뷰] 원격진료, 의사에게 직접 들어봤습니다!

최윤섭 / 8월 2, 2022

코로나19 이후 한국에서도 원격진료가 한시적으로 허용된 이후 2년이 넘는 시간이 흘렀습니다. 이후 400-500만 건의 원격진료가 시행되었는데요. 원격진료에 대해서 산업계나, 의사 단체의 이야기는 많지만, 정작 원격진료를 직접 해보신 개별 의사의 목소리를 들어볼 기회는 많이 없었는데요. 그래서 원격진료 전담병원을 운영하시는 두 분의 의사를 모시고 원격진료에 대해서 들어봤습니다. 시간 내어주신 이의선 원장님과 이정훈 원장님께 다시 한 번 감사드립니다! 1. 원격진료, 의사에게 직접 들어봤습니다 – 원격의료 전문병원 의사 인터뷰 (1) 2. 원격진료의 장점은 OOO 이다! – 원격의료 전문병원 의사 인터뷰 (2)

[칼럼] 디지털 의료 혁신과 규제 과학

최윤섭 / 6월 15, 2022

최근 서울신문에 기고한 칼럼입니다. 글자수 제한 없이 집필했던 원문을 올려드립니다. 기술 혁신이 가속화될수록 규제의 중요성이 커진다. 특히 인간의 생명을 다루는 의료 및 헬스케어 분야의 기술에 대한 규제는 더욱 그러하다. 하지만 디지털 기술 혁신이 예측 불가능한 방향으로 폭발적으로 일어나면서, 이를 어떻게 합리적으로 규제할 것인지에 대한 고민도 깊어지고 있다. 이러한 상황에서 규제 과학의 중요성이 대두된다. 규제 과학은 규제 시스템 자체를 과학적으로 수립하는 방법론이다. 식약처 등 규제 기관은 이렇게 규제에 대한 과학적인 접근을 더욱 강화해야 한다. 또한 이를 위해 규제기관에 대한 지원도 필요하다. 규제는 근본적으로 기술의 발전에 후행할 수밖에 없다. 4차 산업혁명으로 대표되는 디지털 혁신이 폭발적으로 일어남에 따라 디지털 의료와 관련된 규제의 간극은

[칼럼] 디지털 헬스케어 수가를 새 정부에 바란다

최윤섭 / 5월 9, 2022

제가 최근 전자신문에 기고한 칼럼입니다. 분량 제한 없이 썼던 원문을 올려드립니다. 디지털 헬스케어 분야에서 새 정부에 바라는 것은 단 한 가지밖에 없다. 바로 수가이다. 디지털 헬스케어에 특화된, 특히 소프트웨어 의료기기에 특화된 새로운 수가 기준이 필요하다. 이것 없이는 4차산업혁명의 핵심 분야인 디지털 헬스케어에 대한 진흥책은 모두 미봉책일 뿐이다. 지난 수년 동안 업계에서는 이를 수없이 요구해왔지만, 실질적인 진전은 없었다. 새 정부가 보험 수가라는 업계의 오랜 숙원 하나만 해결하더라도, 디지털 헬스케어 분야에서는 전례 없이 성공적인 정부로 역사에 남을 것이다. 디지털 헬스케어 분야에는 ‘기승전수가’라는 관용구가 있다. 한국과 같은 단일 의료 보험의 국가에서는 새로운 의료기술을 개발하여 사업화하는 경우, 별도 급여가 책정되지 않으면 시장 진입

[트레바리 북클럽] 헬스케어 스타트업의 경영학 읽기

최윤섭 / 5월 1, 2022

헬스케어 스타트업 대표님들이 함께 모여서 경영학 책을 읽고 토론하고, 고민을 나누며 성장하는 트레바리 북클럽 ‘헬스케어 스타트업의 경영학 읽기’ 를 오픈합니다. 지난 1-4월에 같은 주제로 진행한 이후 두 번째로 오픈하는 북클럽입니다. 이번에는 6월부터 4개월 동안 매달 첫번째 금요일 저녁에 트레바리 강남 아지트에 모여서 아래와 같은 4권의 책에 대해서 토론합니다. 나름대로 많은 고민 끝에 스타트업 대표님들이 경영자로서 성장하시는데 도움을 줄 수 있는 책으로 엄선하였습니다. 이 북클럽은 헬스케어 스타트업의 대표님들만(!) 참여하실 수 있는 북클럽으로, 신청 이후에 이 요건에 대한 간단한 확인 절차를 거치게 됩니다. 헬스케어 스타트업 AND 대표자가 아니실 경우 참여가 불가합니다. 이 조건으로 정원이 미달되면 미달된 채로 진행합니다. (참고로 지난 시즌 헬스케어