AI / Machine Learningproces

destylacja wiedzy

Trening mniejszego modelu (ucznia), by naśladował wyjścia większego modelu (nauczyciela), przenosząc jego wiedzę przy mniejszym koszcie.

Typ
proces
Pojęcie nadrzędne
kompresja modelu
Źródło
Hinton, Vinyals, Dean, Distilling the Knowledge in a Neural Network (2015)

Chcesz wykorzystać AI w swojej firmie?

Wdrażamy chatboty, agentów głosowych i automatyzacje dla MŚP. Pierwsza konsultacja jest bezpłatna.

Bezpłatna konsultacja