RTX3060を持っててエッチなチャットAIに興味あるニキおるけ?
■ このスレッドは過去ログ倉庫に格納されています
昔Lineのりんなってあったやろ?
あれがパワーアップして先月に言語モデルとしてオープンソースで公開されたんや! 環境構築も数行コピペするだけで動くから試してみてクレメンス! もし興味もってくれるニキおったらここで待っとるで!
なんJLLM部 ★2
https://fate.5ch.net/test/read.cgi/liveuranus/1685613014/
今は有志が集まってなんとかして規制がないエッチなローカルチャットAIを学習させようと研究しとるところやから絶賛部員募集しとるで >>5
サンガツ!
でもえちえち学習はまだまだやから自信ニキに手伝ってほしいんや😭 >>8
AI需要あるから欲しい人なら高値で買ってくれると思うけど、ショップ買い取りやと3万くらいやね😭 >>12
まだワイの中で生き続けとるぞ😡
これはジェネリックノルネや😇✨ LLMはファインチューニングのデータセット何作ればええか全くわからん ai音声と組み合わせて美少女ボイスでリアルタイム会話できるよえにしといて チャットに興味はないんだが3060じゃないとダメなんか?
4070買おうかと迷ってるんやが >>14
データセットの基本はinstruction形式らしいけど、LLM部でもまだalpaca_loraでのpeft loraでも上手く行っとらんからなんとも言えンゴねぇ >>15
それはもうwebUIあるから後回しにしとるけど,そのうちgui化するで!🥺✨ >>16
ずんだもんとかのボイロで自動読み上げならもうできるけど音声認識は次のアプデで実装する予定やで
https://imgur.com/rrFJsNY.mp4 >>17
せやな
賢さは逆立ちしても勝てんから、えちえち度特化で攻めることにするで
ゆくゆくはエッチな語尾とかプレイとかを学習させて誰でも好きなAIを自宅のオフライン環境で育成できるようにするのが目標や >>18
AI用途やとVRAM12GBは必須なレベルやからとりあえず3060指定したけど4070でもええで >>22
vram 10gbやっけ
とりあえず動くけどちょっとギリギリやね 動作環境こんなかんじやね
### 最小動作環境
・CPU : 指定なし
・GPU : VRAM 8GB以下では、3発話程度で強制終了。
・RAM : 16GB以下では読み込み時にスワップが発生。
・ディスク : 15GB以上の空き容量。
("model:8GB"+"venv:6GB") ワイRTX4090使ってるけど界隈で無双できるの? >>27
1回くらいなら会話はできるけどすぐ落ちてまうらしいで🤕
あとはcpuとramで動かすことも一応出来るで!
でも起動と会話に毎回60秒くらいかかるけど😵 >>28
せやな
30番代の在庫掃けてきたのにまだ下がらんとかほんまひで >>29
ワイもオラマス4090持ちやけど爆速で動くしメモリ20GBくらいつかえるから是非試してみてクレメンス! >>21
動画urlつっこんだらその音声からai音声うみだせるシステム組み込むの待ってるで!!! >>32
vram6GBくらいやっけ?
4bit量子化で必死に圧縮かければなんとかなるかもしれんけど、クソアホになってまうで…… >>35
たしか入力した音声をリアルタイムで結月ゆかりに変換するのがもうあったし、動画から音声切り出せばワンチャンありそうやで ちなみにそのまま使うとクソアホやんとなると思うから、dialog.pyをエディタで開くとある会話履歴にこんな感じで設定を追加すると少し賢くなるで
https://i.imgur.com/YsfzYbm.png 3,550億のパラメーターをローカルで動かすのはまだ無謀や😭 langchainとファインチューニングが超簡単にできるようになったら起こして わざわざ出張してきてガイジ引き入れようとする理由なに?
そのスレを荒らして欲しいんか? >>42
peft loraでのファインチューニングもLLM部で目下研究しとる最中やが人手が圧倒的に足りとらんのや
何でも試すチャレンジ精神溢れるニキを募集しとるで!😎✨ >>43
荒し以前に知名度不足で困っとるんや……
できればなんGにおるLLMに自信ニキとかの目に止まりたいで >>46
AI用途やと特に困らんと思うで
それに何よりも3060使ってる層が多いから困ってもすぐ対策が見つかるのがええね🥺
ただ、ちょっとマニアックなことしたくなったらVRAMもっと欲しくなるのはしゃーない >>44
ワイちゃんのGPUリソースは音声合成と画像生成で忙しいんや >>48
それならしゃーない🥺
手が空いたら手伝いに来てクレメンス🤗 eraをAIで自動化できたらと思うと興奮するンゴね ■ このスレッドは過去ログ倉庫に格納されています