Deepinfra
Choisissez un accès direct au service d’inférence lorsqu’un modèle pris en charge répond déjà aux besoins de votre charge de travail.
Points forts
- Une relation directe entre votre application et la plateforme qui sert le modèle sélectionné facilite la description et le diagnostic du parcours des requêtes.
- La documentation propre au modèle vous permet de vérifier concrètement les formats d’entrée, les paramètres disponibles et les sorties attendues avant le déploiement.
- Une intégration ciblée peut être plus simple à maintenir si vous n’avez pas besoin de comparer régulièrement les fournisseurs.
Compromis
- Son catalogue se limite aux modèles pris en charge par la plateforme ; un modèle disponible ailleurs peut nécessiter une autre intégration.
- Passer ultérieurement à un autre fournisseur nécessite tout de même de modifier les identifiants et d’effectuer des tests de régression, même si les deux API se ressemblent.