Zum Hauptinhalt springen

Produk tion sk lasse LL M - To ols

Program mi erungs meth ode

Auf grund dieser W elle von LL Ms star ken Ver ständ nis , Erzeug ung Fä hig keiten , die Auf mer ksam keit auf die Details der imper ativen Program mi erung scheint nicht mehr erforderlich , und die Pro zess oder Business - L og ic - Ch ore ograph ie der Pip eline - F ä hig keit der deklar ativen Program mi erung , wurde zum Ma inst re am " Program mi erung " - Art , so dass wir sehen , wie L CE L , D SP y , Sem an tic - K ern el , einschließlich der Ne uling beg innt " nach oben " zu kon zent ri eren , kon zent ri eren sich auf die Business - L og ic - Ch ore ograph ie - F ä hig keit , vielleicht ist dies eine ähn liche DA G - M eth ode von Air f low . Wer den Sie ein neu es Program mi erungs mod ell ?

Ins gesamt

Prom pt - To ols

Lang Sm ith oder Azure Prom pt F low

Program mi ers pra che

Python oder JavaScript

Entwicklung eines Frame works / Orch estri erung sto ols

Lang chain oder Sem it ic Kern el

API - Fr ame work / Service - Fr ame work

Fast API und Next . js

Cloud - H osting - Hersteller

R ender (A WS Lam ada) oder Ver cel

Er stellen von LL M - An wend ungen

分类NameStar数量备注学习
框架LangChain77【必学】*
LlamaIndex29【必学】专注于RAG,Python,JS SDK比较差*
Semantic-kernel17【不确定?】C#,Python,Java?
haystack13有了LangChain可能就不需要这个了
DSPy7太学术了?The framework for programming—not prompting—foundation models
AgentSuperAgent4这个感觉很专业,有时间再学习?
Rift3专门针对程序员
AutoGen22
Camel4
GPTsOpenGPTs6LangChain出品
低代码LangFlowLangChain可视化
LiteLLM
Flowise21
Langflow14
PromptChainer商业感觉做的很专业
RAGvectara闭源非常专业的RAG商业软件;也有开源项目;用户可以将PDF、Word、PPT、RTF等文件数据上传至Vectara平台中,构建数据搜索引擎。

Archi vi erung und Be oba chtung

分类NameStar数量备注
观察Obsidian Copilot一个有趣的方法,用于如何使用语义搜索和 OpenSearch 的 BM25 实现
Tanuki一个使用装饰器进行数据验证的 LLM 框架
griptape1.5一个具有稍微更好的内部编码标准的 langchain 替代品
guidance16比传统的提示或链接更有效地控制现代语言模型
intructor3.6
Llmflows0.5langchain 的另一个替代品,但在定义工作流程方面有一个有趣的方法
txtai6.5有用于聊天、医学/科学论文工作流程、开发者语义搜索以及标题和故事文本语义搜索的衍生产品
LiteLLM5.7一个简单、轻量级的 LLM 封装器
归档Chidori1.2
AutoChains已经3个月没更新
MiniChain1.2已经3个月没更新
SimpleAIChat3.3已经7个月没更新

Monitor ing und Analyse

Der LL M - Di en st auf Produktions niveau erforder t :

  1. Inst alli eren von prompt

  2. Prom pt Ver sions ver walt ung

  3. Rele vante Kenn za hlen für das Prüf - / Veri fizi erung ssystem

  4. Dat ens atz mana gement

  5. Überwach ung und Statistik verschieden er Met rik en : Besu che , Antwort ze iten , Tok en - G eb ü hren us w .

分类NameStar数量备注
SaaSLangSmithN/A
开源LangFuse2
开源Prompt Flow7
Helicone1.2

Produk tion sk lasse LL M App W art ung sp latt form

      • Lang Sm ith * * : Lang C hain of fizi elle Pla tt form , Saa S - Di en st , * * Nicht Open Source * *
      • [ L ang F use ] (htt ps ://git hub . com/lang f use/lang f use) * * : * * Open - So urce * * + Saa S , Lang Sm ith - P lat form , Lang C hain - In te gr ation , Open AI - API (2 .1 K)
        • [ P rom pt F low ] (htt ps ://github.com/microsoft/promptflow? tab = read me - ov - file) * * : Microsoft * * Open Source * * + Azure AI Cloud - Di en st mit Integr ation des Sem an tic Kern els (7. 4 K)

Sch nell F low

L ernen .

https://microsoft.github.io/promptflow/how-to-guides/quick-start.html

UI - Kom pon enten

LangUI(1.6K)

agentlabs(0.5K)

Sons tig es

分类NameStar数量备注
LCEL
Python 模板语言Jinja2

Referenz

分类NameStar数量备注
框架Obsidian Copilot一个有趣的方法,用于如何使用语义搜索和 OpenSearch 的 BM25 实现
Tanuki个使用装饰器进行数据验证的 LLM 框架
LiteLLM5.7一个简单、轻量级的 LLM 封装器
AutoChain1.7langchain 的另一个替代品
griptape1.5一个具有稍微更好的内部编码标准的 langchain 替代品
txtai6.5has spinoffs for chat, workflows for medical/scientific papers, semantic search for developers and semantic search for headlines and story text
有用于聊天、医学/科学论文工作流程、开发者语义搜索以及标题和故事文本语义搜索的衍生产品
Llmflows0.5langchain 的另一个替代品,但在定义工作流程方面有一个有趣的方法
guidance16比传统的提示或链接更有效地控制现代语言模型*
intructor3.6*

E 2 B : Frame works und To ols für KI - Prod uk te

CategoryTools/Platforms
Monitoring, Observability, AnalyticsLangsmith, Helicone, langfuse, context
FrontendAgentLabs
Runtime for LLMsE2B
Building frameworks & platformsLangchain, Haystack by deepset, Superagent, Poe, GenWorlds, LiteLLM, Rift by Morph, AutoGen, Vercel AI SDK, OpenGPTs, Huggging Face Agents, Fixie
Data integration, memory managementvectara, LlamaIndex, ABACUS.AI, cadea, SID Memory
API and routers for LLMsGenoss GPT, Martian, OpenRouter
Libraries for building AI productsCAMEL, ChatterBot(5年没更新了)
OrchestrationAGIXT
Building & deploying LLMsBANANA

frameworks and tools for AI products