Contoh pertanyaan. Kredit: Universitas Ben-Gurion Negev
Penggunaan kecerdasan buatan, khususnya mannequin bahasa besar seperti ChatGPT, menjadi lebih umum. Akibatnya, terdapat peningkatan keinginan untuk menggunakan mannequin AI dalam interpretasi informasi medis sebagai alat untuk membuat keputusan medis yang penting.
Sebuah tim peneliti dari Universitas Ben-Gurion Negev memutuskan untuk menguji kemampuan mannequin bahasa besar (LLM) yang berspesialisasi dalam informasi medis dan membandingkannya. Temuan penelitian mengejutkan ini dipublikasikan di jurnal Computer systems in Biology and Drugs.
Kecerdasan buatan yang diterapkan pada informasi medis telah menjadi alat umum yang digunakan untuk menjawab pertanyaan pasien melalui chatbot medis, memprediksi penyakit, membuat information sintetis untuk melindungi privasi pasien, atau menghasilkan pertanyaan dan jawaban medis untuk mahasiswa kedokteran.
Mannequin AI yang memproses information tekstual terbukti efektif dalam mengklasifikasikan informasi.
Namun, ketika information menjadi informasi medis klinis yang menyelamatkan nyawa, terdapat kebutuhan untuk memahami makna mendalam dari kode medis dan perbedaan di antara keduanya.
Mahasiswa PhD Ofir Ben Shoham dan Dr. Nadav Rapoport dari Departemen Rekayasa Perangkat Lunak dan Sistem Informasi di Universitas Ben-Gurion Negev memutuskan untuk memeriksa sejauh mana mannequin bahasa besar memahami dunia kedokteran dan dapat menjawab pertanyaan tentang topik ini. Untuk melakukan hal ini, mereka melakukan perbandingan antara mannequin umum dan mannequin yang disesuaikan berdasarkan informasi medis.
Untuk tujuan ini, para peneliti membangun metode evaluasi khusus, MedConceptsKA, untuk menjawab pertanyaan tentang konsep medis.
Para peneliti menghasilkan lebih dari 800.000 pertanyaan dan jawaban tertutup yang mencakup konsep medis internasional pada tiga tingkat kesulitan untuk menilai bagaimana orang yang bekerja dengan mannequin bahasa menafsirkan istilah medis dan membedakan konsep medis, seperti prognosis, prosedur, dan obat-obatan. Para peneliti membuat pertanyaan yang secara otomatis memerlukan deskripsi kode medis, menggunakan algoritma yang mereka kembangkan.
Meskipun pertanyaan mudah memerlukan pengetahuan dasar, pertanyaan sulit memerlukan pemahaman mendetail dan kemampuan untuk mengidentifikasi perbedaan kecil antara konsep medis serupa. Pertanyaan tingkat menengah memerlukan lebih banyak informasi latar belakang. Para peneliti menggunakan standar information klinis yang tersedia untuk mengevaluasi kode klinis, sehingga memungkinkan mereka membedakan konsep medis untuk tugas-tugas seperti praktik pengkodean medis, ringkasan, penagihan otomatis, dan banyak lagi.
Temuan penelitian menunjukkan bahwa sebagian besar mannequin memiliki kinerja yang buruk – setara dengan tebakan acak – termasuk mannequin yang dilatih berdasarkan information medis. Hal ini terjadi secara keseluruhan, kecuali ChatGPT-4, yang memiliki kinerja lebih baik dibandingkan yang lain dengan akurasi rata-rata sekitar 60%, meskipun masih jauh dari memuaskan.
“Sebagian besar model yang dilatih khusus untuk tujuan medis tampaknya mencapai tingkat akurasi yang mendekati perkiraan acak sejauh ini, meskipun sebelumnya telah dilatih berdasarkan data medis,” kata Dr. Rapoport.
Perlu diperhatikan bahwa mannequin yang dibuat untuk tujuan umum (seperti Llama3-70B dan ChatGPT-4) mencapai performa yang lebih baik. ChatGPT-4 menunjukkan kinerja terbaik, meskipun keakuratannya masih kurang untuk beberapa pertanyaan kode medis spesifik yang dibuat para peneliti. ChatGPT-4 mencapai peningkatan rata-rata 11th of September% dibandingkan dengan Llama3-OpenBioLLM-70B, mannequin bahasa klinis dengan kinerja terbaik.
“Ukuran kami berfungsi sebagai sumber berharga untuk menilai kemampuan model bahasa besar dalam menafsirkan kode medis dan membedakan konsep medis.” Kami menunjukkan bahwa sebagian besar mannequin bahasa klinis mencapai kinerja tebakan acak, sementara ChatGPT-3.5, ChatGPT-4, dan Llama3-70B mengungguli mannequin klinis ini, meskipun faktanya fokus mannequin ini sama sekali bukan pada bidang medis,” jelas PhD murid Shoham.
“Dengan financial institution soal kami, kami dapat dengan mudah, hanya dengan menekan satu tombol, mengevaluasi mannequin lain yang akan dirilis di masa depan dan membandingkannya.
Information klinis sering kali mencakup kode medis standar dan teks bahasa alami. Penelitian ini menyoroti perlunya bahasa klinis yang lebih luas dalam mannequin untuk memahami informasi medis dan perlunya kehati-hatian dalam penggunaannya secara luas.
“Kami menyajikan tolok ukur untuk mengevaluasi kualitas informasi kode medis dan menyoroti perlunya pengguna berhati-hati saat menggunakan informasi ini,” Dr. Rapoport menyimpulkan.
Informasi lebih lanjut: Ofir Ben Shoham dkk, MedConceptsKA: Konsep Medis Open Supply KA Benchmark, Komputer dalam Biologi dan Kedokteran (2024). DOI: 10.1016/j.compbiomed.2024.109089
Disediakan oleh Universitas Ben-Gurion Negev
Kutipan: ChatGPT-4 Mengungguli Lainnya dalam Perbandingan Mannequin AI Medis (2024, 2 Desember) Diakses pada 2 Desember 2024, dari https://medicalkpress.com/nevs/2024-12-chatgpt-outperforms-medical-ai-comparison html
Dokumen ini memiliki hak cipta. Kecuali untuk transaksi wajar untuk tujuan studi atau penelitian pribadi, tidak ada bagian yang boleh direproduksi tanpa izin tertulis. Konten disediakan untuk tujuan informasi saja.
solusi praktis menikah
solusi praktis
praktek solusi
Informasi mengenai KING SLOT, Segera Daftar Bersama king selot terbaik dan terpercaya no satu di Indonesia. Boleh mendaftar melalui sini king slot serta memberikan hasil kembali yang paling tinggi saat sekarang ini hanyalah king slot paling gacor, gilak dan gaco saat sekarang di Indonesia melalui program return tinggi di kingselot serta pg king slot
jablay88 permainan paling prime dan garansi imbal balik hasil besar bersama https://jablay88.biz/
jadijp88 permainan paling prime dan garansi imbal balik hasil besar bersama https://jadijp88.com/
jazz88 permainan paling prime dan garansi imbal balik hasil besar bersama https://jazz88.biz/
jurutogel88 permainan paling prime dan garansi imbal balik hasil besar bersama https://jurutogel88.web/
kangbet88 permainan paling prime dan garansi imbal balik hasil besar bersama https://kangbet88.biz/
kilau88 permainan paling prime dan garansi imbal balik hasil besar bersama https://kilau88.asia/
kuningtoto88 permainan paling prime dan garansi imbal balik hasil besar bersama https://kuningtoto88.web/
lomboktoto88 permainan paling prime dan garansi imbal balik hasil besar bersama https://lomboktoto88.org/
mager88 permainan paling prime dan garansi imbal balik hasil besar bersama https://mager88.biz/
mantul888 permainan paling prime dan garansi imbal balik hasil besar bersama https://mantul888.biz/
mawartoto88 permainan paling prime dan garansi imbal balik hasil besar bersama https://mawartoto88.asia/
meriah88 permainan paling prime dan garansi imbal balik hasil besar bersama https://meriah88.biz/
moba88 permainan paling prime dan garansi imbal balik hasil besar bersama https://moba88.org/
paristogel88 permainan paling prime dan garansi imbal balik hasil besar bersama https://paristogel88.biz/
parsel88 permainan paling prime dan garansi imbal balik hasil besar bersama https://parsel88.web/
paus13 permainan paling prime dan garansi imbal balik hasil besar bersama https://paus13.com/
pay7777 permainan paling prime dan garansi imbal balik hasil besar bersama https://pay7777.web/
planetliga88 permainan paling prime dan garansi imbal balik hasil besar bersama https://planetliga88.web/
ratuslot88 permainan paling prime dan garansi imbal balik hasil besar bersama https://ratuslot88.biz/
rtp100 permainan paling prime dan garansi imbal balik hasil besar bersama https://rtp100.web/
ruby88 permainan paling prime dan garansi imbal balik hasil besar bersama https://ruby88.org/
rungkad88 permainan paling prime dan garansi imbal balik hasil besar bersama https://rungkad88.biz/
senopati88 permainan paling prime dan garansi imbal balik hasil besar bersama https://senopati88.biz/
sis88 permainan paling prime dan garansi imbal balik hasil besar bersama https://sis88.biz/
sistoto permainan paling prime dan garansi imbal balik hasil besar bersama https://sistoto.web/
sontogel88 permainan paling prime dan garansi imbal balik hasil besar bersama https://sontogel88.com/
spin98 permainan paling prime dan garansi imbal balik hasil besar bersama https://spin98.biz/
totosaja88 permainan paling prime dan garansi imbal balik hasil besar bersama https://totosaja88.com/
warung22 permainan paling prime dan garansi imbal balik hasil besar bersama https://warung22.com/
warung88 permainan paling prime dan garansi imbal balik hasil besar bersama https://warung88.asia/
winrate999 permainan paling prime dan garansi imbal balik hasil besar bersama https://winrate999.biz/
wuzz888 permainan paling prime dan garansi imbal balik hasil besar bersama https://wuzz888.com/
999jitu permainan paling prime dan garansi imbal balik hasil besar bersama https://999jitu.org/
adu88 permainan paling prime dan garansi imbal balik hasil besar bersama https://adu88.asia/
basket88 permainan paling prime dan garansi imbal balik hasil besar bersama https://basket88.web/
batu88 permainan paling prime dan garansi imbal balik hasil besar bersama https://batu88.biz/
berita88 permainan paling prime dan garansi imbal balik hasil besar bersama https://berita88.biz/
bukalapak88 permainan paling prime dan garansi imbal balik hasil besar bersama https://bukalapak88.web/
cipit888 permainan paling prime dan garansi imbal balik hasil besar bersama https://cipit888.asia/
delta888 permainan paling prime dan garansi imbal balik hasil besar bersama https://delta888.biz/
dosen88 permainan paling prime dan garansi imbal balik hasil besar bersama https://dosen88.org/
jago17 permainan paling prime dan garansi imbal balik hasil besar bersama https://jago17.com/
jalantoto88 permainan paling prime dan garansi imbal balik hasil besar bersama https://jalantoto88.biz/
janjigacor88 permainan paling prime dan garansi imbal balik hasil besar bersama https://janjigacor88.org/
jitujp88 permainan paling prime dan garansi imbal balik hasil besar bersama https://jitujp88.com/
jokiwin88 permainan paling prime dan garansi imbal balik hasil besar bersama https://jokiwin88.web/
juragan66 permainan paling prime dan garansi imbal balik hasil besar bersama https://juragan66.biz/
kenzototo88 permainan paling prime dan garansi imbal balik hasil besar bersama https://kenzototo88.biz/
kkslot77slot permainan paling prime dan garansi imbal balik hasil besar bersama https://kkslot77slot.com/
kompas88 permainan paling prime dan garansi imbal balik hasil besar bersama https://kompas88.biz/
kopi88 permainan paling prime dan garansi imbal balik hasil besar bersama https://kopi88.biz/
kudajitu88 permainan paling prime dan garansi imbal balik hasil besar bersama https://kudajitu88.biz/
kursi88 permainan paling prime dan garansi imbal balik hasil besar bersama https://kursi88.biz/
liputan88 permainan paling prime dan garansi imbal balik hasil besar bersama https://liputan88.web/
livitoto88 permainan paling prime dan garansi imbal balik hasil besar bersama https://livitoto88.web/
lotus88 permainan paling prime dan garansi imbal balik hasil besar bersama https://lotus88.asia/
m77casino88 permainan paling prime dan garansi imbal balik hasil besar bersama https://m77casino88.com/
majujp88 permainan paling prime dan garansi imbal balik hasil besar bersama https://majujp88.org/
mamikos permainan paling prime dan garansi imbal balik hasil besar bersama https://mamikos.org/
mamikos88 permainan paling prime dan garansi imbal balik hasil besar bersama https://mamikos88.com/
masterplay88 permainan paling prime dan garansi imbal balik hasil besar bersama https://masterplay88.asia/
masterplay999 permainan paling prime dan garansi imbal balik hasil besar bersama https://masterplay999.web/
medantoto88 permainan paling prime dan garansi imbal balik hasil besar bersama https://medantoto88.biz/
medusa888 permainan paling prime dan garansi imbal balik hasil besar bersama https://medusa888.com/
meja88 permainan paling prime dan garansi imbal balik hasil besar bersama https://meja88.biz/
midasplay88 permainan paling prime dan garansi imbal balik hasil besar bersama https://midasplay88.biz/
mijit888 permainan paling prime dan garansi imbal balik hasil besar bersama https://mijit888.web/
mposun88 permainan paling prime dan garansi imbal balik hasil besar bersama https://mposun88.web/
ibisbudget88 permainan paling prime dan garansi imbal balik hasil besar bersama https://ibisbudget88.com/
mercure88 permainan paling prime dan garansi imbal balik hasil besar bersama https://mercure88.com/
hotel88 permainan paling prime dan garansi imbal balik hasil besar bersama https://hotel88.web/
sheraton88 permainan paling prime dan garansi imbal balik hasil besar bersama https://sheraton88.com/
ubud88 permainan paling prime dan garansi imbal balik hasil besar bersama https://ubud88.asia/
hardrock88 permainan paling prime dan garansi imbal balik hasil besar bersama https://hardrock88.com/
kuta88 permainan paling prime dan garansi imbal balik hasil besar bersama https://kuta88.asia/
nasigoreng88 permainan paling prime dan garansi imbal balik hasil besar bersama https://nasigoreng88.com/
sate88 permainan paling prime dan garansi imbal balik hasil besar bersama https://sate88.com/
rendang88 permainan paling prime dan garansi imbal balik hasil besar bersama https://rendang88.asia/
gadogado permainan paling prime dan garansi imbal balik hasil besar bersama https://gadogado.org/
kfc88 permainan paling prime dan garansi imbal balik hasil besar bersama https://kfc88.web/
pizzahut88 permainan paling prime dan garansi imbal balik hasil besar bersama https://pizzahut88.web/
starbucks88 permainan paling prime dan garansi imbal balik hasil besar bersama https://starbucks88.reside/
sederhana permainan paling prime dan garansi imbal balik hasil besar bersama https://sederhana.org/
kopikenangan permainan paling prime dan garansi imbal balik hasil besar bersama https://kopikenangan.asia/
angkawin permainan paling prime dan garansi imbal balik hasil besar bersama https://angkawin.web/
rockygerung88 permainan paling prime dan garansi imbal balik hasil besar bersama https://rockygerung88.com/
monopoli88 permainan paling prime dan garansi imbal balik hasil besar bersama https://monopoli88.com/
kimjongun permainan paling prime dan garansi imbal balik hasil besar bersama https://kimjongun.asia/
catur88 permainan paling prime dan garansi imbal balik hasil besar bersama https://catur88.asia/
tato88 permainan paling prime dan garansi imbal balik hasil besar bersama https://tato88.org/
speaker88 permainan paling prime dan garansi imbal balik hasil besar bersama https://speaker88.web/
rajah permainan paling prime dan garansi imbal balik hasil besar bersama https://rajah.asia/
kunci gitar permainan paling prime dan garansi imbal balik hasil besar bersama https://kuncigitar.org/
gitar88 permainan paling prime dan garansi imbal balik hasil besar bersama https://gitar88.asia/
gambartato permainan paling prime dan garansi imbal balik hasil besar bersama https://gambartato.com/
gambar88 permainan paling prime dan garansi imbal balik hasil besar bersama https://gambar88.org/
maxwin888slot permainan paling prime dan garansi imbal balik hasil besar bersama https://maxwin888slot.com/
rumah permainan paling prime dan garansi imbal balik hasil besar bersama https://rumah.asia/
nada888 permainan paling prime dan garansi imbal balik hasil besar bersama https://nada888.information/
musik88 permainan paling prime dan garansi imbal balik hasil besar bersama https://musik88.asia/
sewarumah permainan paling prime dan garansi imbal balik hasil besar bersama https://sewarumah.biz/
