idea-ccnl / fooocus-taiyi-xl Goto Github PK

pipeline_text2image = StableDiffusionXLPipeline.from_single_file( "/taiyi_diffusion_xl.safetensors", torch_dtype=torch.float16, variant="fp16", use_safetensors=True ).to("cuda") prompt = "一个宇航员骑着白马" neg_prompt = "" generator = torch.Generator(torch.device("cuda")).manual_seed(1234) num_inference_steps = 50 guidance_scale = 7 image = pipeline_text2image( prompt=prompt, negative_prompt=neg_prompt, height=1024, width=1024, generator=generator, num_inference_steps=num_inference_steps, guidance_scale=guidance_scale).images[0]
无法获得一个宇航员骑着白马应用的展示效果。请问是否可以提供一个diffusers的推理结果呢？

从huggingface上下载的Taiyi-XL文件结构与SDXL一致。
请问tokenizer（2个） / text_encoder（2个）以及scheduler下的文件应该放到models下的那个文件下呢？
gradio版本为3.41.2，但是sh run.sh的界面存在问题

无法自主下载：/taiyi-diffusion-xl-base-1.0-text_encoder_pretrained/tokenizer'。。
替代为本地路 ./Fooocus-Taiyi-XL-main/backend/headless/fcbh/sd1_tokenizer 不报错，

但是UI点击没反应

请问是只能用Fooocus吗?用sdwebui还有comfyui均在加载模型时报错。类似这样。
size mismatch for cond_stage_model.clip_l.transformer.text_model.embeddings.token_embedding.weight: copying a param with shape torch.Size([57475, 768]) from checkpoint, the shape in current model is torch.Size([49408, 768]).