小猫遊りょう(たかにゃし・りょう)
@jaguring1
言語理解のための代表的なベンチマーク「GLUE」と「SuperGLUE」で、成績ランキング(リーダーボード)が15時間ほど前に更新された。
マイクロソフトが作成したモデル「DeBERTa/TuringNLR v4」が最高性能をさらに更新。もちろん、人間のスコアを超えてる。SuperGLUEでは人間のスコアは3位、GLUEでは15位
https://twitter.com/jaguring1/status/1346930415882235906/photo/2
https://twitter.com/5chan_nel (5ch newer account)