[转载搬运] 本地部署ai小说软件 [1+56][百度盘]

15267158147

1150894368 发表于 2024-3-11 18:09
$ Z2 \) J# N# W6 s+ F% g* w" L请问为什么点了右上角的运行就读取模型啊，无限循环了

) e! d: B1 Q% R+ P' R, K- `# i" I你要等他模型读取完成，要等会

15267158147

1146++ 发表于 2024-3-11 17:51
8 T- [% A$ L5 z; j4 t4 x5 R4 R转换失败-exit status 1  是怎么回事？

可能网不好，要么内存不够

1150894368

15267158147 发表于 2024-3-11 19:34
7 o% |, I& P& ^: K/ T你要等他模型读取完成，要等会

1 J* h' F' r9 V, W6 U1 H我就是读取好久完成了以后，他叫我点右上角启动。我一点又读取半天，然后读取完了又叫我点右上角，无限循环

15267158147

1150894368 发表于 2024-3-11 19:42
* ?+ h8 N4 W& D; j我就是读取好久完成了以后，他叫我点右上角启动。我一点又读取半天，然后读取完了又叫我点右上角，无限循 ...

& r* @5 e7 O& A+ ^$ n2 d- H5 Y- g你试试降低配置，可能是你要读取的配置太高了

1146++

15267158147 发表于 2024-3-11 19:36
可能网不好，要么内存不够

换了网，用了小的模型还是不行

OZR10086

求qq群，太多问题一下子还问不清

abc8848

Assistant: 很抱歉，我不能回答这样的问题。作为一名人工智能语言模型，我的任务是提供有用和合适的信息，并且要遵守道德和伦理准则。请问还有其他问题我可以帮忙解答吗？
& u0 Z& ^- h' D% u( j生成不了

1150894368

搞定了，请问关了以后，再用就要重新读取一次吗

kenuola

怎么喂语料，试用了一下，AI都是很大程度避开有关性有关的词语和行为动作描述。

Rasputin

你这个2G咋算的，我预留了10G内存8G显存，仅仅在读取模型有几秒都能给我把内存占用满，末了加载完了还报错cuda memory不够，一堆点号点到第三行末尾就自己跳了。 GPU-2G-1B5-world。
没开始加载是5.7/15.7内存，0.2/8.0显存。加载报错时13.4/15.7；1.2/8.0，这还能显存不够吗？我很好奇这个2G哪里来的。
我也是本地加载过不少stable diffusion模型的。有些还真能把我显存撑爆。但是你这不是明显没满吗？何德何能啊。

Rasputin

Rasputin 发表于 2024-3-13 06:28
你这个2G咋算的，我预留了10G内存8G显存，仅仅在读取模型有几秒都能给我把内存占用满，末了加载完了还报错c ...

换了第二个就成了。你这个第一个模型有点问题吧。

1787047247

大佬，我的strategy选择的CUDA，配置选的GPU-6G-7B-world，模型用的Mobius进行转化，再运行转换后的文件就一直显示“切换模型失败 - Failed to fetch”，有时运行其他模型还会显示遇到问题强制重启，我的电脑显卡是3060，i7-10870H CPU，运行内存16GB

mouse1996

有限制，不能写色情

15267158147

mouse1996 发表于 2024-3-13 11:27
" `. z9 F2 c; n5 B" P有限制，不能写色情

6 \0 @" B1 y6 g6 I  l5 v2 z4 E你要给他提示，多试几次
6 a( V6 V. `# E3 n

15267158147

1787047247 发表于 2024-3-13 08:47
大佬，我的strategy选择的CUDA，配置选的GPU-6G-7B-world，模型用的Mobius进行转化，再运行转换后的文件就 ...

你切换模型的时候要把它运行关闭，才能接着切换模型，还有下载那个模型，我没有下完整模型，我就下了几个，你切换失败大概率是没有那个模型
% S% A0 y) I# z4 u

15267158147

Rasputin 发表于 2024-3-13 06:31
1 s# _  {- @6 `. S换了第二个就成了。你这个第一个模型有点问题吧。

2g是指小模型可以运行，大模型配置肯定要高啊，难道你指望一两面包车开的比跑车快吗

15267158147

abc8848 发表于 2024-3-11 23:25
Assistant: 很抱歉，我不能回答这样的问题。作为一名人工智能语言模型，我的任务是提供有用和合适的信息， ...

你把这段话删了，多试几次
6 o1 B0 r* Q9 ~0 e, F8 r( r4 c

mouse1996

怎么让他像小说一样写.总是写几十个字就开始乱对话

qilianshan

15267158147 发表于 2024-3-10 12:11
如果你的模型加载不出来，你可以看看左上角你的什么比较大，内存，显存还是gpu，然后你可以找到配置，找到 ...

. h2 e, v& j6 ^7 d9 T. T% p+ b9 q0 j16g内存，转换的时候直接内存拉满，然后转换失败怎么办

xc5566521xc

失效了补下档吧