BT
Brendan Tao
Author with expertise in Artificial Intelligence in Medicine
Achievements
This user has not unlocked any achievements yet.
Key Stats
Upvotes received:
0
Publications:
6
(33% Open Access)
Cited by:
0
h-index:
6
/
i10-index:
3
Reputation
Biology
< 1%
Chemistry
< 1%
Economics
< 1%
Show more
How is this calculated?
Publications
0

Can ChatGPT Fool the Match? Artificial Intelligence Personal Statements for Plastic Surgery Residency Applications: A Comparative Study

Jeffrey Chen et al.Jul 23, 2024
Introduction: Personal statements can be decisive in Canadian residency applications. With the rise in AI technology, ethical concerns regarding authenticity and originality become more pressing. This study explores the capability of ChatGPT in producing personal statements for plastic surgery residency that match the quality of statements written by successful applicants. Methods: ChatGPT was utilized to generate a cohort of personal statements for CaRMS (Canadian Residency Matching Service) to compare with previously successful Plastic Surgery applications. Each AI-generated and human-written statement was randomized and anonymized prior to assessment. Two retired members of the plastic surgery residency selection committee from the University of British Columbia, evaluated these on a 0 to 10 scale and provided a binary response judging whether each statement was AI or human written. Statistical analysis included Welch 2-sample t tests and Cohen's Kappa for agreement. Results: Twenty-two personal statements (11 AI-generated by ChatGPT and 11 human-written) were evaluated. The overall mean scores were 7.48 (SD 0.932) and 7.68 (SD 0.716), respectively, with no significant difference between AI and human groups ( P = .4129). The average accuracy in distinguishing between human and AI letters was 65.9%. The Cohen's Kappa value was 0.374. Conclusions: ChatGPT can generate personal statements for plastic surgery residency applications with quality indistinguishable from human-written counterparts, as evidenced by the lack of significant scoring difference and moderate accuracy in discrimination by experienced surgeons. These findings highlight the evolving role of AI and the need for updated evaluative criteria or guidelines in the residency application process.
0

Gender inclusivity of ophthalmology journal submission guidelines and associated research metrics

Brendan Tao et al.Jun 5, 2024
Purpose This cross-sectional study evaluated the prevalence of inclusive author submission guidelines across ophthalmology journals. Methods Journals were identified from the 2021 Journal Citations Report (Clarivate Analytics). Independent reviewers rated each author submission guideline as “inclusive” for satisfying at-least one of six criteria: i) included examples of gender inclusive language; ii) recommended the use of gender-inclusive language; iii) distinguished between sex and gender; iv) provided educational resources on gender-inclusive language; v) provided a policy permitting name changes (e.g., in case of gender and name transition); and/or vi) provided a statement of commitment to inclusivity. The primary objective was to investigate the proportion of journals with “gender-inclusive” author submission guidelines and the elements of the gender-inclusive content within these guidelines. A secondary objective was to review the association between “gender-inclusivity” in author submission guidelines with publisher, origin country, and journal/source/influence metrics (Clarivate Analytics). Results Across 94 journals, 29.8% journals were rated as inclusive. Inclusive journals had significantly higher relative impact factor, citations, and article influence scores compared to non-inclusive journals. Of the 29.8% of inclusive journals, the three most common domains were inclusion of an inclusivity statement (71.4% of inclusive journals), distinguishing between sex and gender (67.9%), and provision of additional educational resources on gender reporting for authors (60.7%). Conclusion A minority of ophthalmology journals have gender-inclusive author submission guidelines. Ophthalmology journals should update their submission guidelines to advance gender equity of both authors and study participants and promote the inclusion of gender-diverse communities.