[转载搬运] 本地部署ai小说软件 [1+56][百度盘]

15267158147

1150894368 发表于 2024-3-11 18:09
请问为什么点了右上角的运行就读取模型啊，无限循环了

你要等他模型读取完成，要等会
. U  y: d8 i7 V7 Y# Z9 o7 o+ C9 j+ w

15267158147

1146++ 发表于 2024-3-11 17:51
' G+ C% O( Z  T" D转换失败-exit status 1  是怎么回事？

可能网不好，要么内存不够
, ], W% x8 N9 }: d! r

1150894368

15267158147 发表于 2024-3-11 19:34
! o3 k: M7 F5 w  `2 H* F. I, W你要等他模型读取完成，要等会

我就是读取好久完成了以后，他叫我点右上角启动。我一点又读取半天，然后读取完了又叫我点右上角，无限循环

15267158147

1150894368 发表于 2024-3-11 19:42
- _* K% U4 ?$ k! w! F' x8 |我就是读取好久完成了以后，他叫我点右上角启动。我一点又读取半天，然后读取完了又叫我点右上角，无限循 ...

你试试降低配置，可能是你要读取的配置太高了

1146++

15267158147 发表于 2024-3-11 19:36
! B7 q' X9 ^7 Y  b8 ^可能网不好，要么内存不够

换了网，用了小的模型还是不行

OZR10086

求qq群，太多问题一下子还问不清

abc8848

Assistant: 很抱歉，我不能回答这样的问题。作为一名人工智能语言模型，我的任务是提供有用和合适的信息，并且要遵守道德和伦理准则。请问还有其他问题我可以帮忙解答吗？
生成不了

1150894368

搞定了，请问关了以后，再用就要重新读取一次吗

kenuola

怎么喂语料，试用了一下，AI都是很大程度避开有关性有关的词语和行为动作描述。

Rasputin

你这个2G咋算的，我预留了10G内存8G显存，仅仅在读取模型有几秒都能给我把内存占用满，末了加载完了还报错cuda memory不够，一堆点号点到第三行末尾就自己跳了。 GPU-2G-1B5-world。
% B& s" E0 Q* v/ e7 r没开始加载是5.7/15.7内存，0.2/8.0显存。加载报错时13.4/15.7；1.2/8.0，这还能显存不够吗？我很好奇这个2G哪里来的。
我也是本地加载过不少stable diffusion模型的。有些还真能把我显存撑爆。但是你这不是明显没满吗？何德何能啊。

Rasputin

Rasputin 发表于 2024-3-13 06:28
2 n( L) ]2 t; f0 ]你这个2G咋算的，我预留了10G内存8G显存，仅仅在读取模型有几秒都能给我把内存占用满，末了加载完了还报错c ...

换了第二个就成了。你这个第一个模型有点问题吧。

1787047247

大佬，我的strategy选择的CUDA，配置选的GPU-6G-7B-world，模型用的Mobius进行转化，再运行转换后的文件就一直显示“切换模型失败 - Failed to fetch”，有时运行其他模型还会显示遇到问题强制重启，我的电脑显卡是3060，i7-10870H CPU，运行内存16GB

mouse1996

有限制，不能写色情

15267158147

mouse1996 发表于 2024-3-13 11:27
有限制，不能写色情

1 x% Q* K% g2 T0 W" B' ?4 |你要给他提示，多试几次
% `3 M" ^; Q- F7 l1 X4 j1 d

15267158147

1787047247 发表于 2024-3-13 08:47
: ~: Y6 W1 X& I  ]# X& @& I大佬，我的strategy选择的CUDA，配置选的GPU-6G-7B-world，模型用的Mobius进行转化，再运行转换后的文件就 ...

- ^8 e9 u- [# l' N% t: g你切换模型的时候要把它运行关闭，才能接着切换模型，还有下载那个模型，我没有下完整模型，我就下了几个，你切换失败大概率是没有那个模型
: J* O4 l! a$ |

15267158147

Rasputin 发表于 2024-3-13 06:31
& x+ a0 w9 `  C- u7 P换了第二个就成了。你这个第一个模型有点问题吧。

% P1 h4 w1 v' k6 G+ i& S9 x& U7 \$ U2g是指小模型可以运行，大模型配置肯定要高啊，难道你指望一两面包车开的比跑车快吗
8 T8 _/ y/ [) {+ p; Z# S: L

15267158147

abc8848 发表于 2024-3-11 23:25
2 F) l& B5 k6 C2 BAssistant: 很抱歉，我不能回答这样的问题。作为一名人工智能语言模型，我的任务是提供有用和合适的信息， ...

你把这段话删了，多试几次

mouse1996

怎么让他像小说一样写.总是写几十个字就开始乱对话

qilianshan

15267158147 发表于 2024-3-10 12:11
; G+ E' k  ?$ ]* v1 t& y如果你的模型加载不出来，你可以看看左上角你的什么比较大，内存，显存还是gpu，然后你可以找到配置，找到 ...

16g内存，转换的时候直接内存拉满，然后转换失败怎么办

xc5566521xc

失效了补下档吧