Repos open source que usan tiktoken-rs

10 repos públicos que SeeRepo leyó usan tiktoken-rs. Se usa más con Tokio, axum y rusqlite.

Léela en markdown

Se usa más con

  • Tokio5 repos
  • rusqlite2 repos
  • tower2 repos
  • Ratatui2 repos
tiktoken-rs10 repos
  • axum3 repos
  • SQLite2 repos
  • crossterm2 repos
  • quick-xml2 repos

Los repos, por estrellas

  1. 1
    vllm-project/vllm

    A high-throughput and memory-efficient inference and serving engine for LLMs

    Python+10297.1 kIA 14.7%
  2. 2
    rtk-ai/rtk

    CLI proxy that reduces LLM token consumption by 60-90% on common dev commands. Single Rust binary, zero dependencies

    Rust+1286.8 kIA 33.4%
  3. 3
    headroomlabs-ai/headroom

    Compress tool outputs, logs, files, and RAG chunks before they reach the LLM. 20% fewer tokens for coding agents, 60-95% fewer tokens for JSON, same answers. Library, proxy, MCP server.

    Python+2279.9 kIA 29.7%
  4. 4
    BerriAI/litellm

    The fastest, litest AI Gateway. Rust core with Python SDK. Call 100+ LLM APIs in OpenAI (or native) format with cost tracking, guardrails, load balancing, and logging [Bedrock, Azure, OpenAI, Anthropic, OpenAI, VertexAI, vLLM, Nvidia NIM]

    Python+11763.4 kIA 20.6%
  5. 5
    meilisearch/meilisearch

    A lightning-fast search engine API bringing AI-powered hybrid search to your sites and applications.

    Rust+2759.9 kIA 0.2%
  6. 6
    aaif-goose/goose

    an open source, extensible AI agent that goes beyond code suggestions - install, execute, edit, and test with any LLM

    Rust+7356.7 kIA 5%
  7. 7
    openobserve/openobserve

    Open source observability platform for logs, metrics, traces, RUM (web, android, ios), Session replay, pipelines, SLO and LLM observability. A sophisticated, simple and highly performant alternative to Datadog, Splunk, and Elasticsearch with 140x lower storage costs and single binary deployment.

    Rust+7623.1 kIA 5.1%
  8. 8
    funstory-ai/BabelDOC

    Yet Another Document Translator

    Rust+179.9 k
  9. 9
    deeplethe/utopia

    World's first open-source enterprise world model.

    Rust+388.7 kIA 57.9%
  10. 10
    mufeedvh/code2prompt

    A CLI tool to convert your codebase into a single LLM prompt with source tree, prompt templating, and token counting.

    Rust+107.8 kIA 1.1%

Preguntas frecuentes

¿Cuál es el repo open source más popular que usa tiktoken-rs?
vllm-project/vllm, con 97,060 estrellas en GitHub.

La prueba: vllm-project/vllm en GitHub

¿Con qué otras tecnologías se usa tiktoken-rs?
Con Tokio (5), axum (3), rusqlite (2), SQLite (2) y tower (2), de los 10 repos que la usan.
¿En qué lenguajes están escritos los repos que usan tiktoken-rs?
Rust (7) y Python (3).
¿Cuántos repos que usan tiktoken-rs tienen commits firmados por IA?
9 de los 10; el que más, deeplethe/utopia, con el 57.9% de sus commits.

La prueba: los commits que firmó cada herramienta en deeplethe/utopia

Mira tu código por dentro, hoy.

Pega tu repo y lo ves dibujado, parte por parte: uno mediano, en menos de un minuto.

Gratis y sin cuenta.¿Repo privado? Entra con GitHub

O mira por dentro el de SeeRepo →