wevi (observar cómo se entrenan los embeddings)
Una herramienta para seguir paso a paso cómo word2vec va construyendo los vectores de palabras. Le das datos de entrenamiento muy pequeños, como "eat|apple, drink|milk", y al avanzar el entrenamiento cambian poco a poco los colores de las matrices de pesos de entrada y salida mientras los puntos de las palabras van encontrando su lugar en el gráfico PCA de abajo. Se entiende que un embedding no es un valor fijado de antemano, sino algo que se va formando a base de repetir el entrenamiento.
Cómo probarlo
En "Presets" elige un ejemplo como "Fruit and juice (CBOW)" o "King and queen", pulsa "Update and Restart" y avanza el entrenamiento con "Next" o con los botones de 20, 100 y 500. En las vistas Neurons, Weight Matrices, Vectors y PCA puedes comparar cómo se ve el mismo entrenamiento en cada una, y también editar los datos de entrenamiento, el tamaño de la capa oculta y la tasa de aprendizaje. La pantalla y la entrada están solo en inglés y ocupa mucho ancho, así que conviene una computadora de escritorio.