BioGPT

BioGPT - это Генеративный Предварительно Обученный Трансформер, созданный Microsoft для генерации и анализа текстов в биомедицинской области. Исследовательская группа использовала данные из базы данных биомедицинских статей PubMed, которая была обновлена до 2021 года. Для обучения BioGPT использовались данные, включающие 15 миллионов названий и аннотаций.

Источник: https://the-decoder.com/biogpt-is-a-microsoft-language-model-trained-for-biomedical-tasks/