[转载搬运] 本地部署ai小说软件 [1+56][百度盘]

15267158147

1150894368 发表于 2024-3-11 18:09
请问为什么点了右上角的运行就读取模型啊，无限循环了

你要等他模型读取完成，要等会
# A  K  m- Z6 `

15267158147

1146++ 发表于 2024-3-11 17:51
- `; F: T- E! ]$ |$ P8 }转换失败-exit status 1  是怎么回事？

可能网不好，要么内存不够

1150894368

15267158147 发表于 2024-3-11 19:34
& D8 o- c5 l# U9 g+ n8 z- F5 s+ i你要等他模型读取完成，要等会

我就是读取好久完成了以后，他叫我点右上角启动。我一点又读取半天，然后读取完了又叫我点右上角，无限循环

15267158147

1150894368 发表于 2024-3-11 19:42
. ]+ H" p0 W/ ~9 z" q) p$ b我就是读取好久完成了以后，他叫我点右上角启动。我一点又读取半天，然后读取完了又叫我点右上角，无限循 ...

你试试降低配置，可能是你要读取的配置太高了

1146++

15267158147 发表于 2024-3-11 19:36
7 Y& F4 l/ W9 {3 a; U可能网不好，要么内存不够

换了网，用了小的模型还是不行

OZR10086

求qq群，太多问题一下子还问不清

abc8848

Assistant: 很抱歉，我不能回答这样的问题。作为一名人工智能语言模型，我的任务是提供有用和合适的信息，并且要遵守道德和伦理准则。请问还有其他问题我可以帮忙解答吗？
生成不了

1150894368

搞定了，请问关了以后，再用就要重新读取一次吗

kenuola

怎么喂语料，试用了一下，AI都是很大程度避开有关性有关的词语和行为动作描述。

Rasputin

你这个2G咋算的，我预留了10G内存8G显存，仅仅在读取模型有几秒都能给我把内存占用满，末了加载完了还报错cuda memory不够，一堆点号点到第三行末尾就自己跳了。 GPU-2G-1B5-world。
没开始加载是5.7/15.7内存，0.2/8.0显存。加载报错时13.4/15.7；1.2/8.0，这还能显存不够吗？我很好奇这个2G哪里来的。
$ \  C1 @  o7 O: g) y" I我也是本地加载过不少stable diffusion模型的。有些还真能把我显存撑爆。但是你这不是明显没满吗？何德何能啊。

Rasputin

Rasputin 发表于 2024-3-13 06:28
0 Z6 R* |0 O+ o1 ~& h' r你这个2G咋算的，我预留了10G内存8G显存，仅仅在读取模型有几秒都能给我把内存占用满，末了加载完了还报错c ...

换了第二个就成了。你这个第一个模型有点问题吧。
' l2 X$ M2 s: }3 V4 H6 `

1787047247

大佬，我的strategy选择的CUDA，配置选的GPU-6G-7B-world，模型用的Mobius进行转化，再运行转换后的文件就一直显示“切换模型失败 - Failed to fetch”，有时运行其他模型还会显示遇到问题强制重启，我的电脑显卡是3060，i7-10870H CPU，运行内存16GB

mouse1996

有限制，不能写色情

15267158147

mouse1996 发表于 2024-3-13 11:27
* e2 {2 a2 P( E8 v& S2 N有限制，不能写色情

你要给他提示，多试几次
* C# R' e5 ^! h7 |3 A, L: \) x

15267158147

1787047247 发表于 2024-3-13 08:47
大佬，我的strategy选择的CUDA，配置选的GPU-6G-7B-world，模型用的Mobius进行转化，再运行转换后的文件就 ...

你切换模型的时候要把它运行关闭，才能接着切换模型，还有下载那个模型，我没有下完整模型，我就下了几个，你切换失败大概率是没有那个模型
( i+ i/ k& }( B7 d' |! t! Q

15267158147

Rasputin 发表于 2024-3-13 06:31
换了第二个就成了。你这个第一个模型有点问题吧。

9 z: s6 N- A, T' G; \6 R2g是指小模型可以运行，大模型配置肯定要高啊，难道你指望一两面包车开的比跑车快吗

15267158147

abc8848 发表于 2024-3-11 23:25
/ o4 R+ z, {1 u2 sAssistant: 很抱歉，我不能回答这样的问题。作为一名人工智能语言模型，我的任务是提供有用和合适的信息， ...

- f1 B2 n0 H$ Z/ B7 l, g你把这段话删了，多试几次

mouse1996

怎么让他像小说一样写.总是写几十个字就开始乱对话

qilianshan

15267158147 发表于 2024-3-10 12:11
如果你的模型加载不出来，你可以看看左上角你的什么比较大，内存，显存还是gpu，然后你可以找到配置，找到 ...

+ n# M- g6 l8 _4 U5 F* D/ x16g内存，转换的时候直接内存拉满，然后转换失败怎么办

xc5566521xc

失效了补下档吧