Provider Intelligence

Free LLM API resources, diringkas untuk ops NusaGoldenTech.

Halaman ini merangkum repo FebbyUtomo/free-llm-api-resources menjadi shortlist provider yang bisa dipakai untuk discovery, benchmark, dan fallback routing.

26 provider tracked13 free providers13 trial credit providersCoding route shortlist

Snapshot lokal dari commit 9589aca. Selalu cek repo sumber untuk update terbaru.

provider-discovery
$ parse README.md
free providers: OpenRouter, Google AI Studio, Cloudflare, Cerebras, Groq...
trial credits: Baseten $30, AI21 $10, Upstage $10, SambaNova $5...
coding candidates: Cloudflare Kimi K2.7 Code, Qwen Coder, Codestral, Cerebras gpt-oss
→ next: benchmark latency + quota + output quality
Snapshot

Repo sumber adalah katalog, halaman ini adalah layer operasional.

Kita tidak menyalin semua detail mentah. Fokusnya: provider yang layak dites untuk Hermes fallback, coding-only route, dan low-cost automation.

26Total provider di README
13Free providers
13Trial credit providers
5Kandidat prioritas awal
Free providers

Provider gratis yang paling relevan untuk pipeline kita.

Dipilih dari README sumber berdasarkan potensi routing, model coding, speed, dan kemudahan benchmark.

Cloudflare Workers AI
10,000 neurons/day; ada Kimi K2.7 Code, Kimi K2.6, Qwen, gpt-oss, GLM.
coding
Cerebras
gpt-oss-120b + Llama 3.1 8B; rate limit generous untuk fast inference.
fast
Groq
Latency cepat; cocok buat routing ringan, extraction, STT Whisper.
speed
OpenRouter Free
Banyak model :free, tapi quota default kecil. Bagus untuk backup/testing.
fallback
Google AI Studio
Gemini/Gemma free tier; perlu perhatian data-use policy.
general
Mistral Codestral
30 rpm / 2000 rpd; cocok untuk coding bila akses tersedia.
code
Trial credits

Credit kecil tapi berguna untuk burst benchmark.

Trial bukan fallback permanen, tapi bagus untuk testing quality/latency dan menambah opsi saat provider utama rate-limited.

ProviderCreditUse casePriority
Baseten$30Compute-time experiments, custom model serving.high
AI21$10 / 3 monthsJamba family eval.medium
Upstage$10 / 3 monthsSolar Pro/Mini benchmark.medium
SambaNova$5 / 3 monthsDeepSeek, gpt-oss, minimax, Llama.high
Scaleway1M tokensQwen coder, Mistral, gpt-oss trial.high
Hyperbolic$1Qwen3 Coder / DeepSeek test burst.medium
Recommendation

Shortlist untuk langkah berikutnya.

Ini urutan yang paling masuk akal buat Hermes/NusaGoldenTech saat ini.

1. Cloudflare Workers AI

Prioritas karena README mencatat @cf/moonshotai/kimi-k2.7-code. Cocok untuk eksplorasi coding-only route tambahan.

free tier

2. Cerebras

Bagus untuk high-speed fallback. Model gpt-oss-120b dan Llama kecil bisa jadi evaluator/router murah.

free tier

3. Groq

Paling cocok untuk latency-sensitive tasks: extraction, rewrite kecil, speech-to-text, dan monitoring summaries.

free tier

4. Scaleway/SambaNova

Trial credits cukup menarik buat benchmark model besar tanpa commit cost awal.

trial

5. OpenRouter Free

Backup luas, tapi quota default kecil. Tetap berguna untuk model discovery dan smoke test.

free tier

6. Vercel AI Gateway

Masuk akal karena infra kita sudah pakai Vercel. Bisa dievaluasi untuk gateway-style routing.

allowance

Mau jadi provider watchlist aktif?

Next step: kita bisa bikin cron yang pull repo sumber, diff provider/model baru, lalu kirim alert Telegram kalau ada free model coding baru.