12月5日と6日に開催された「AI - 現実の再設計」をテーマとした人工知能の日2023イベントにおいて、VinAI人工知能研究応用会社(Vingroup Corporation)は、ベトナム語の大規模言語モデルであるPhoGPTに関するオープンソース研究プロジェクトを発表しました。
PhoGPT は、OpenAI の ChatGPT のような独自のソフトウェアではなく、オープンソース プロジェクトです。オープンソースであるため、商業上の制限はなく、すべての関係者が PhoGPT を使用して、商用目的のアプリケーション ユニットを含む独自のアプリケーションを開発できます。これは、国内の AI 技術に関連したアプリケーションを開発するコミュニティに提供するプラットフォームのようなものです。
VinAI人工知能研究応用会社のゼネラルディレクター、ブイ・ハイ・フン博士によると、ベトナムのモデルの限界は、これらのモデルが最適なパフォーマンスを達成しておらず、オープンソースのコードセットが不足していることを証明しているという。したがって、AIコミュニティ全体、特に自然言語処理(NLP)コミュニティが直面している緊急の課題の1つは、ベトナム語を高い精度とパフォーマンスで処理できる、より強力な新しいモデルを構築することです。
AI の専門家によると、Transformer デコード プラットフォーム上に構築された 75 億のパラメータを持つビッグ データ言語モデルでは、Flash Attention メカニズム、AliBi コンテキスト長外挿など、利用可能な最先端の技術を使用して、このモデルがゼロからトレーニングされているとのことです...
これらの技術は、モデルがコンテキストをより深く理解するのに役立つだけでなく、PhoGPT が自然に対話してやり取りする能力も向上させます。これにより、モデルは多用途でマルチタスクなツールとなり、幅広いユーザー言語のニーズを満たすことができます。
ブイ・ハイ・フン博士は、PhoGPTは当初から当社によって開発され、世界中の他のすべてのモデルとは独立して開発されたと付け加えた。オープンソース モデルにより、ベトナムのコミュニティはそれをより良く活用し、改善することができます。 PhoGPT のソース コードを公開し、ユーザーが利用できるようにすることで、独自のカスタマイズされたアプリケーションを開発できる環境とユーザー コミュニティを構築できます。
オープンソースの目標の 1 つは、人々がすべてをやり直す必要がないように基盤を築き、組織が大規模な PhoGPT 言語モデルをさらに開発できるようにすることです。これにより、大規模なベトナム語モデルのための質の高いオープンソース コミュニティが社会に形成され、多くの企業が参加して特定の分野に適用できるようになるという良い効果が生まれます。 VinAI人工知能研究応用会社は、PhoGPTを利用して、個人ユーザー向けのアプリケーションや、医療、教育などの分野でベトナムの企業向けの専門的なサポートソリューションパッケージを研究開発する計画を立てていると述べた。
PhoGPTは、政府の2030年までのAI開発戦略に沿って、実用的かつ効果的なアプリケーションを開発するための基礎として、高性能なベトナム語モデルの開発のための最初の基盤を築きました。
バタン
[広告2]
ソース
コメント (0)