Tarification de la passerelle

frais généraux de passerelle / mois
total de la passerelle
balisage efficace
frais généraux / an

Frais généraux à mesure que vous évoluez

Un forfait diminue en proportion de la facture avec le volume ; une majoration en pourcentage augmente en même temps. Regardez où les frais généraux croisent le coût de gestion de votre propre proxy.

Demandes mensuellesCoût directTotal de la passerelleAérien

La couche commodité a un prix qui évolue avec vous

Une passerelle LLM achète des choses réelles – une API chez de nombreux fournisseurs, un repli automatique lorsqu'un modèle est en panne, une mise en cache, une journalisation et des limites de dépenses centralisées – et les facture sous la forme d'un pourcentage de majoration sur les jetons, de frais par demande, de frais de plate-forme mensuels fixes ou d'un mélange. Le piège est qu'un pourcentage de majoration est invisible lorsque vous êtes petit et énorme lorsque vous êtes grand : 5 % sur une facture de 200 $ est une erreur d'arrondi, mais 5 % sur une facture de 40 000 $ représente le salaire annuel d'un ingénieur à temps plein, dépensé pour une fonctionnalité que vous pourriez auto-héberger avec un proxy open source. Ce calculateur sépare le coût brut du fournisseur de la réduction de la passerelle afin que vous puissiez voir la majoration effective et les frais généraux annuels en un seul endroit, puis décider itinéraire par itinéraire. Comparez les prix bruts des jetons sur le comparaison de prix des modèles, récupérez les dépenses liées aux invites répétées avec mise en cache rapide, et modéliser l'ensemble de la facture sur le Calculateur du coût de la pile API.

Hébergez votre projet :DigitalOcean — 200 $ gratuits ↗VPS Hostinger
Coût du substrat rocheuxCoût de migration du modèlePlanificateur de budget APICoût de la fenêtre contextuelleCoût du chatbot RAG