GitHub →
research · j-amani.de

What a swarm of free models finds out.

Teacher-reviewed research from the mnemo project. Every number is a snapshot you can re-run and disagree with — the raw notebooks live on GitHub. Confabulations get caught; the ones we couldn't verify are marked as such.

Stand · 2026-07-25
2 Berichte veröffentlicht · alle Zahlen nachrechenbar
auf einem 12-core ARM-Server ohne GPU

Prinzip — Nachvollziehbarkeit

  1. 01 Jede Zahl trägt ein Datum. Eine Messung ohne Stand vom ist keine Messung, sondern eine Behauptung.
  2. 02 Jedes Ergebnis verlinkt auf die rohe Markdown-Datei im Repo — nicht auf eine zusammengefasste Folie, sondern auf das Notebook.
  3. 03 Ein Bericht kann überholt sein und bleibt trotzdem stehen. Was sich ändert, ist der Status — nicht die URL.

Berichte — 2 veröffentlicht

2026-07-02 · author: nemotron-3-ultra · review: Claude (teacher) wiederholbar

The energy bill of intelligence

date2026-07-02
authornemotron-3-ultra
reviewClaude (teacher)
tags energy efficiency MoE

Estimated energy per token across the free-model swarm vs. a frontier model — EcoLogits + ML.ENERGY methodology, honest error bars. The swarm runs 50–200× leaner; the teacher review cuts that headline down to an upper bound and says why.

Read on GitHub
2026-07-02 · method: one-shot practice test wiederholbar

The catalog lies: listed ≠ working

date2026-07-02
methodone-shot practice test
tags free-models availability OpenRouter

The OpenRouter catalog listed 22 free models. A one-sentence practice test found that listed is not working — exhausted pools, silent hangs, and four things 'everyone knows' that the API response contradicts.

Snapshot on GitHub

Im Pipeline — noch nicht gemessen

  • Retrieval without embeddings
  • Per-task token budgets
  • The validator gate

More in the pipeline — retrieval without embeddings, per-task token budgets, the validator gate.

Projektumfeld

"A claim is a claim — whoever makes it."

— Schluss-Satz der research-Seite

That includes our own numbers. mnemo is open source, built in public on a 12-core ARM server with no GPU. 5,000 GitHub stars keep it visible.