Cicikus v3 Prometheus 4.4B - エッジ推論のための実験的フランケン・マージ

Reddit r/LocalLLaMA / 2026/3/15

📰 ニュースTools & Practical UsageModels & Research

共有:

要点

Prometech は約 4.42B パラメータの実験的モデル Cicikus v3 Prometheus 4.4B をリリースしました。
本モデルは Llama 3.2 3B アーキテクチャのターゲットを絞ったパススルー拡張で、訓練済みアダプターの L2 ノルム分析を通じて「ホットゾーン」を特定し、40層へ拡張しました。
自己監査と推論を改善するための Behavioral Consciousness Engine（BCE）によるファインチューニングを含みます。
コンテキストは 32k トークンをサポートし、エッジ性能を一般消費者向けハードウェア（8GB Safetensors）で最適化しています。
STEM および論理推論タスクに焦点を当て、コミュニティのフィードバックとベンチマークを歓迎します。
モデルリンク: https://huggingface.co/pthinc/Cicikus_PTHS_v3_4.4B

皆さん、こんにちは、

Prometechからの実験的リリース、Cicikus v3 Prometheus 4.4Bをお届けできることを嬉しく思います。

このモデルはLlama 3.2 3Bアーキテクチャのターゲットを絞ったパススルー拡張です。従来のマージではなく、訓練済みアダプターのL2ノルム分析を通じて「ホットゾーン」を特定し、モデルを40層へ拡張しました（約4.42Bパラメータ）。

主な特徴:

BCE統合: 自己監査と推論を改善するため、Behavioral Consciousness Engineでファインチューニングしました。

コンテキスト: 32kトークンのサポート。

エッジ最適化: 一般消費者向けハードウェア（8GB Safetensors）で高密度推論タスクを実行できるよう設計。

現在はSTEMと論理推論タスクに最適化されています。コミュニティからのフィードバックとベンチマークを楽しみにしています。