Удаление повторяющихся символов

Text on the meme

Чуваки, есть такая таска: лстмка должна удалить из предложения повторяющиеся символы. Например, "мммммаааа"->"мама". Повторы преобразую в спец токены и обучаю чар-левел сетку. Качество так себе. Есть какие-то мысли, как ещё можно подойти к этому?

What it means

Автор спрашивает, как лучше удалить повторяющиеся символы из текста: заменить их специальными токенами и обучить символьную модель оказалось недостаточно качественно. Шутка строится на преувеличенно сложном подходе к простой задаче нормализации текста; мем используют как реакцию на переусложнение очевидного решения. EN: The author asks how to remove repeated characters from text because replacing them with special tokens and training a character-level model produced mediocre results. The joke is based on using an overly complicated approach for a simple text-normalization task; the meme is used as a reaction to overengineering an obvious solution.

Objects

text message / текстовое сообщение Russian text / русский текст repeated letters / повторяющиеся буквы quotation marks / кавычки arrow / стрелка dark interface / тёмный интерфейс profile avatar / аватар профиля machine learning model / модель машинного обучения