Карта эмбеддингов
Добавляйте фразы, смотрите, куда они попадают, и читайте близость между ними.
Вводите фразы и смотрите, как они находят своё место в живой двумерной проекции.
Что здесь настоящее
Это лексические векторы, а не нейронные эмбеддинги, и в этой разнице весь урок. Символьные n-граммы, взвешивание TF-IDF, косинусное сходство и PCA до двух измерений — всё вычислено на этой странице. Добавьте слово и его синоним и посмотрите, как они останутся далеко друг от друга: здесь ничто не видит смысла, только написание. Закрыть этот разрыв — ровно то, что делают плотные эмбеддинги внутри ретривера этого сайта, и потому семантическое демо обыгрывает поиск по словам. Этот API не публикует эндпоинт эмбеддингов, поэтому вместо того чтобы его выдумывать, демо показывает честную нижнюю границу.
Каждая фраза — точка. Фразы из похожих символов оказываются рядом.