Google bracht BERT uit in oktober 2018. Woorden maskeren en voorspellen bleek genoeg om diep bidirectioneel taalbegrip te leren.
Home