「スマホで動く」270億パラメーターLLM「Bonsai 27B」登場
カリフォルニア工科大学発のAIスタートアップ・PrismMLは7月15日、「Bonsai 27B」を発表した。「Qwen3.6 27B」をベースとしたマルチモーダルモデルで、Apache 2.0ライセンスの下でオープンソース提供。27Bモデルは通常16ビット精度で約54GB、4ビット版でも約18GBのメモリを要するため、スマートフォンでの実行は困難だった。Bonsai 27Bはパラメータ重みを1~2ビットに削減。1-bit版は3.9GBでiPhone実行可能、Ternary版は5.9GBでノートPC向け。ベンチマーク(知識、推論、数学、コーディング等15項目)では、Ternary版がフル精度の95%、1-bit版が90%の性能を維持したとしている。