hermes-ai.net

Leer docs →
HermesHermes Agent Docs
← Back to case library
Case / 2100646513412292873Otros
Case media / 1MP4 ↗

Haoran | 公众号:独立开发

@hr98w
Verified

Localized reading

Ya está aquí el Jev visual https://t.co/x0kzeE3hdx Siguiendo la idea de la comunidad, mapeo los resultados candidatos a etiquetas fijas, hago el prefill y muestreo directamente, limito los tokens de salida y despliego localmente el modelo multimodal qwen-3.5-0.8B cuantizado a 4 bits. Funciona sin problemas en un MacBook Pro M4 de 16 GB. Aclaración: esto solo reproduce a pequeña escala la forma de Jev en la capa de inferencia; sin duda es menos eficiente que los frameworks de inferencia maduros y tampoco es el principio real de Jev, pero como inferencia…

Original post / ZH

视觉版 Jev 来了 https://t.co/x0kzeE3hdx 仿照着社区的思路,把候选结果映射成固定标签,prefill 完直接采样,限制输出 token,采用多模态的 qwen-3.5-0.8B 4bit 量化部署在本地,16g m4 mbp 顺利运行 叠甲:这只是在 infer 层小小的复现一下 jev 的形式,肯定不如各种成熟推理框架效率高,也肯定不是 jev 的正在原理,但是作为 inference 的小入门仍旧是不错的 demo 如下 200ms 实现《三色货品分拣》
views
29 mil
likes
293
saves
330
reposts
30
Ver original ↗

Links and projects

Fuente

This independent archive preserves a public post with attribution. Text, media, account details and trademarks belong to their respective owners.