LM Studioでのエラー

#1
by alfredplpl - opened

LM Studioで使おうとしたらllama.cppでエラーが出ました。
バージョンが古いのでしょうか?

{
  "title": "Failed to load model",
  "cause": "llama.cpp error: 'done_getting_tensors: wrong number of tensors; expected 245, got 243'",
  "errorData": {
    "n_ctx": 2048,
    "n_batch": 512,
    "n_gpu_layers": 20
  },
  "data": {
    "memory": {
      "ram_capacity": "16.00 GB",
      "ram_unused": "4.40 GB"
    },
    "gpu": {
      "type": "Apple Metal",
      "vram_recommended_capacity": "10.67 GB",
      "vram_unused": "3.90 GB"
    },
    "os": {
      "platform": "darwin",
      "version": "14.0"
    },
    "app": {
      "version": "0.2.23",
      "downloadsDir": "/Users/ozakiy/.cache/lm-studio/models"
    },
    "model": {}
  }
}```

こちらはエラーが出ませんでした。
https://huggingface.co/bartowski/Phi-3-medium-4k-instruct-GGUF

Owner

ちょっと前にllama.cppで読み込めないエラーを確認したのですが、現在最新のllama.cppだと大丈夫なようです。

ありがとうございます。LM Studioの対応を待ちます。

alfredplpl changed discussion status to closed

Sign up or log in to comment