MoE
llm
表示形式
Mixture of Experts(混合エキスパート)の略。
複数の専門的なサブネットワーク(エキスパート)を持ち、入力に応じて一部のエキスパートのみをアクティブにする効率的なアーキテクチャ。
Mistral、GPT-4等で採用。
次に進む
目的に合わせて、学ぶ・比較する・相談するの3つの導線から選べます。
Mixture of Experts(混合エキスパート)の略。
複数の専門的なサブネットワーク(エキスパート)を持ち、入力に応じて一部のエキスパートのみをアクティブにする効率的なアーキテクチャ。
Mistral、GPT-4等で採用。
目的に合わせて、学ぶ・比較する・相談するの3つの導線から選べます。