«ВКонтакте» научила нейросеть писать заголовки для новостей
Разработчики «ВКонтакте» создали нейросеть, которая генерирует новостные заголовки на русском и английском языках. Для ее обучения использовались тексты «РИА Новости» и The New York Times. Об этом Rusbase рассказали в пресс-службе компании.
Для генерации заголовка нейросети нужен только текст новости. Модель обрабатывает его и формулирует заголовок из фрагментов слов — так она добивается правильных падежей и склонений и в итоге получает связное предложение, пояснил представитель соцсети.
При создании нейросети разработчики использовали архитектуру Universal Transformer и технику компрессии данных BPE (Byte Pair Encoding) — они обычно применяются в машинном переводе и позволяют ограничиться небольшим словарем для генерации заголовков.
В компании отметили, что сотрудники «ВКонтакте» — первые, кто использовал BPE для модели суммаризации текста, а также первые, кто обучал такую модель на русскоязычных новостных материалах.
Чтобы проверить качество работы в случаях, когда автоматические и оригинальные заголовки полностью отличаются, но смысл новости передан верно, разработчики провели отдельное исследование, в котором показывали добровольцам новость и два заголовка к ней. По словам опрошенных, в 45% случаев машинный заголовок был не хуже оригинального, а в 15% — даже лучше.
«Исследование с добровольцами показало, что заголовки, созданные нейросетью, пока не всегда получаются такими же качественными, как написанные человеком. Однако мы не перестаем улучшать модель — и непременно добьемся равных результатов», — считает разработчик-исследователь «ВКонтакте» Даниил Гаврилов.
По его словам, технология может использоваться для разных задач, связанных с удобством потребления контента: «Например, во "ВКонтакте" ее потенциально можно применить для умного сокращения постов в ленте пользователя или для создания новостных дайджестов», — пояснил эксперт.
Фото: Pe3check/ Depositphotos.
Нашли опечатку? Выделите текст и нажмите Ctrl + Enter
Популярное
Налог на прибыль организаций
Материалы по теме
-
Пройти курс «Как попасть в топ поисковой выдачи Ozon»
- 1 Крупнейшие платформы откажутся от демонстрации рекламы 9 мая «Рекламная пауза» продлится сутки 07 мая 15:12
- 2 Сервис VK по сбору и анализу ошибок для разработчиков теперь работает с «Авророй» Программисты смогут оперативно устранять неисправности в продуктах 23 апреля 12:08
- 3 Гендиректором «VK Видео» стала Марианна Максимовская Она будет отвечать за разработку стратегии платформы и инновационные форматы 22 апреля 15:36
- 4 «VK Видео» тестирует подписку для отключения рекламы Функция будет доступна только на территории России 22 апреля 13:10