株式会社Laboro.AIは、本年4月に公開した当社オリジナル日本語版BERTモデルに蒸留を施し軽量・高速化を図った『 Laboro DistilBERT 』を開発し、非商用途に無償公開いたしました。 <今回のポイント> ︎本年4月に公開した当社BERTモデルをさらに軽量・高速化 ...
AI研究機関のAnswer.AIとLightOnが、2018年に発表されたGoogleの自然言語処理モデル「BERT」を改善した「ModernBERT」を開発しました。検索、自然言語理解、コード検索などのタスクにおいて、優れた性能を示すとのことです。 Finally, a Replacement for BERT: Introducing ...
NTTデータは3月16日、汎用言語モデルBERTを特定の業務領域(ドメイン)に応じて最適化し、顧客の扱う業務文書に適した言語モデルを自動構築するドメイン特化BERT構築フレームワーク(以下ドメイン特化BERT-FW)を開発したことを発表した。 ドメイン特化BERT ...
株式会社NTTデータは16日、汎用言語モデル「BERT」を特定の業務領域(ドメイン)に応じて最適化し、企業の扱う業務文書に適した言語モデルを自動で構築する、ドメイン特化BERT構築フレームワーク(以下、ドメイン特化BERT-FW)を開発したと発表した。
260万超のWebページからテキスト情報を事前学習 株式会社Laboro.AIは、近年AI自然言語処理の分野で注目を集めるアルゴリズムBERTを独自に事前学習させた日本語版モデルを開発し、オープンソースとして公開いたしました。 <今回のポイント> ・︎ 約4,300のWeb ...