Abstract Recent studies indicate that Generative Pre-trained Transformer 4 with Vision (GPT-4V) outperforms human physicians in medical challenge tasks. However, these evaluations primarily focused on the accuracy of multi-choice questions alone. Our study extends the current scope by conducting a comprehensive analysis of GPT-4V’s rationales of image comprehension, recall of medical knowledge, and step-by-step multimodal reasoning when solving New England Journal of Medicine (NEJM) Image Challenges—an imaging quiz designed to test the knowledge and diagnostic capabilities of medical professionals. Evaluation results confirmed that GPT-4V performs comparatively to human physicians regarding multi-choice accuracy (81.6% vs. 77.8%). GPT-4V also performs well in cases where physicians incorrectly answer, with over 78% accuracy. However, we discovered that GPT-4V frequently presents flawed rationales in cases where it makes the correct final choices (35.5%), most prominent in image comprehension (27.2%). Regardless of GPT-4V’s high accuracy in multi-choice questions, our findings emphasize the necessity for further in-depth evaluations of its rationales before integrating such multimodal AI models into clinical workflows.

Highlights•GLP-1R agonists are linked with neuroprotection in neurodegenerative processes.•This study examined the effects of GLP-1R agonists on intraocular pressure (IOP).•GLP-1R agonist use was significantly associated with a small decrease in IOP.•Future prospective studies are needed to provide definitive insights.AbstractObjectiveThis study aims to provide data on the effects of glucagon-like peptide 1 receptor (GLP-1R) agonists on intraocular pressure (IOP).DesignRetrospective clinical cohort study.SettingMulticenter.Study Population1247 glaucoma surgery and treatment naïve eyes of 626 patients who were initiated on GLP-1R agonists compared to 1083 glaucoma surgery and treatment naïve eyes of 547 patients who were initiated on other oral antidiabetics.Observation ProceduresThe University of California Health Data Warehouse was queried for patients exposed to GLP-1R agonists or other oral antidiabetics. Index date was defined as the date of first exposure to the medication. Eyes with at least one pre-exposure and one post-exposure tonometry record within 365 days of the index date were included in the analysis. Clinical and laboratory data elements were extracted from the database. Eyes were censored from the analysis upon exposure to glaucoma hypotensive medication or glaucoma surgery. ∆IOP was analyzed using a paired t-test. Regression analysis was conducted using generalized estimating equations (GEE) accounting for inter-eye correlation. Sensitivity analyses were performed to assess the robustness of the findings.Main Outcome MeasuresPrimary outcome measure was ∆IOP after exposure to the medication.ResultsThe median age of all included subjects was 66.2 years [IQR=18.3]; 607 (51.7%) were female, and 667 (56.9%) were Caucasian. Median pre-exposure IOP, HbA1c, and BMI were 15.2 mmHg [IQR=3.8], 7.5 [IQR=2.4], and 29.8 [IQR=9.4], respectively. 776 individuals (66.1%) had diabetes, with the median number of active oral antidiabetics being 1.0 [IQR=1.0], and 441 (37.5%) being insulin users. Several pre-exposure characteristics significantly differed between the GLP-1R agonist and the control group. The mean ∆IOP was -0.4±2.8 mmHg (paired t-test p<0.001) and -0.2±3.3 mmHg (paired t-test p = 0.297) in the GLP-1R agonist and other antidiabetics groups, respectively. Pre-exposure IOP was the only independent predictor of ΔIOP in multivariable GEE. Sensitivity analyses yielded similar results.ConclusionsAlthough GLP-1R agonists were significantly associated with a decrease in IOP in the paired analysis, they were not associated with ΔIOP in multivariable GEE. Moreover, the difference between the ΔIOP in the two groups was small. Future prospective studies following a standardized dose and delivery method may provide further insights.

Background/aims To investigate the association between use of metformin and circumpapillary retinal nerve fibre layer (cpRNFL) thickness, as well as whole image capillary density (wiCD), in patients with glaucoma. Methods This cross-sectional study included patients with glaucoma suspect or primary open-angle glaucoma (POAG) underwent optical coherence tomography angiography imaging. Use and duration of antidiabetic medications were assessed at the time of imaging. Multivariable linear mixed-effect modelling was used to estimate the effect of diabetes medication on wiCD and cpRNFL while controlling for covariates including age, race, body mass index, diagnosis, 24–2 visual field mean deviation, and intraocular pressure, average signal strength index as well as any variables that showed a p <0.1 in the univariable analysis. Results A total of 577 eyes (330 POAG and 247 glaucoma suspect) of 346 patients were included. Sixty-five patients (23%) had diabetes, of whom 55 (78.5%) used metformin, and 17 (26.2%) used insulin. After adjusting for covariates, the association between metformin use and wiCD (1.56 (95% CI 0.40 to 2.71); p=0.008), duration of metformin use and wiCD (0.12 (95% CI 0.02 to 0.22) per 1 year longer; p=0.037), and metformin use and cpRNFL thickness (5.17 (95% CI 1.24 to 9.10) µm; p=0.010) had statistically significant associations in each model. Conclusions Metformin use was associated with higher wiCD and thicker cpRNFL. These findings indicate a potential association, underscoring the need for longitudinal studies to determine if metformin plays a role in the retinal conditions of patients with glaucoma. Trial registration number NCT00221897

To examine social factors associated with the 5-year risk of glaucoma suspects (GS) converting to open-angle glaucoma (OAG).

Background This study aimed to investigate the rationale, barriers, and facilitators of teleretinal camera implementation in primary care and endocrinology clinics for diabetic retinopathy (DR) screening across University of California (UC) health systems utilizing the Exploration, Preparation, Implementation, and Sustainment (EPIS) framework. Methodology Institutional representatives from UC Los Angeles, San Diego, San Francisco, and Davis participated in a series of focus group meetings to elicit implementation facilitators and barriers for teleophthalmology programs within their campuses. Site representatives also completed a survey regarding their program's performance over the calendar year 2022 in the following areas: DR screening camera sites, payment sources and coding, screening workflows including clinical, information technology (IT), reading, results, pathologic findings, and follow-up, including patient outreach for abnormal results. Focus group and survey results were mapped to the EPIS framework to gain insights into the implementation process of these programs and identify areas for optimization. Results Four UC campuses with 20 active camera sites screened 7,450 patients in the calendar year 2022. The average DR screening rate across the four campuses was 55%. Variations between sources of payment, turn-around time, image-grading structure, image-report characteristics, IT infrastructure, and patient outreach strategies were identified between sites. Closing gaps in IT integration between data systems, ensuring the financial sustainability of the program, and optimizing patient outreach remain primary challenges across sites and serve as good opportunities for cross-institutional learning. Conclusions Despite the potential for long-term cost savings and improving access to care, numerous obstacles continue to hinder the widespread implementation of teleretinal DR screening. Implementation science approaches can identify strategies for addressing these challenges and optimizing implementation.