Dalai - LLaMAをあなたのコンピューターで最も簡単に実行する方法
(cocktailpeanut.github.io)- たった2文で LLaMA 7B モデルをローカルで実行可能
npx dalai llama
npx dalai serve - llama.cpp + llama-dl CDN
- ハック可能なWebアプリを内蔵(JavaScript API および Socket.io API を含む)
localhost:3000にアクセス
npx dalai llamanpx dalai servelocalhost:3000 にアクセス
2件のコメント
1つ出てくると、芋づる式に次々といろいろ出てきますね
ダライ・ラマっていうのか…ネーミングセンスが…。
llama.cpp - FacebookのLLaMAモデルを純粋なC/C++で推論する