#benchmark

    本地 LoCoMo 抽样。

    moon run benchmark --target native

    密钥在 benchmark/.env(见 .env.example),不提交。只在 native 上真跑;wasm、wasm-gc、js 只编译空的 main。远端 CI 不执行。

    分数在仓库根 README.md。逐题记录在 results/locomo-20.json。

    data/locomo_20.json 派生自 LoCoMo,commit cbfbc1dba6bc53d00625212a0f22d55ffee7c1fc,CC BY-NC 4.0。不适用仓库的 MIT。

    Env

    type Env

    Question

    type Question

    QwenEmbedder

    type QwenEmbedder

    QwenEmbedder::dim

    fn QwenEmbedder::dim(self : QwenEmbedder) -> Int

    QwenEmbedder::embed

    fn QwenEmbedder::embed(self : QwenEmbedder, texts : Array[String]) -> Result[Array[Array[Double]],
    MoomemError
    ]

    Sample

    type Sample

    Turn

    type Turn

    Source Files