takumi123xxx/x-bot-qwen3-32b-lora

X Bot - Qwen3-32B LoRA

Xの投稿データでファインチューニングしたQwen3-32BのLoRAアダプタです。

モデル情報

• ベースモデル: Qwen/Qwen3-32B
• ファインチューニング: LoRA (rank=64, alpha=128)
• 学習データ: X投稿データ約2,000件
• 用途: 日本語テキスト生成（ツイートスタイル）

使用方法

from transformers import AutoModelForCausalLM, AutoTokenizer
from peft import PeftModel

# ベースモデルとトークナイザーをロード
base_model = AutoModelForCausalLM.from_pretrained(
    "Qwen/Qwen3-32B",
    torch_dtype=torch.bfloat16,
    device_map="auto",
)
tokenizer = AutoTokenizer.from_pretrained("Qwen/Qwen3-32B")

# LoRAアダプタを適用
model = PeftModel.from_pretrained(base_model, "YOUR_USERNAME/x-bot-qwen3-32b-lora")

ライセンス

Apache 2.0