[Перевод] Как открытые веса раскрыли секреты обучения GPT-5

Команда AI for Devs перевела статью, показывающую, что открытые веса — это не только про прозрачность, но и про утечку тайн обучения. На примере модели GPT-oss автор показывает, как можно восстановить части обучающего пайплайна и даже выявить, что GPT-5 видела фразы с сайтов для взрослых.

https://habr.com/ru/articles/955260/

#OpenAI #GPT5 #GPToss #glitchtokens #trainingdata #membershipinference #tokenizer #embeddings #GitHub #adultcontent

Как открытые веса раскрыли секреты обучения GPT-5

Команда  AI for Devs  перевела статью, показывающую, что открытые веса — это не только про прозрачность, но и про утечку тайн обучения.На примере модели GPT-oss автор показывает, как можно...

Хабр

A brief explanation of glitch tokens.

#AI #Glitch #GlitchTokens

https://youtu.be/WO2X3oZEJOA

Glitch Tokens - Computerphile

YouTube
Glitch Tokens - Computerphile

YouTube