Upload chain.py
This commit is contained in:
parent
566feae028
commit
8dd70f3b53
37
app/chain.py
Normal file
37
app/chain.py
Normal file
@ -0,0 +1,37 @@
|
|||||||
|
from langchain.chains import RetrievalQA
|
||||||
|
from langchain_core.runnables import RunnablePassthrough
|
||||||
|
from langchain_core.output_parsers import StrOutputParser
|
||||||
|
from langchain_core.prompts import ChatPromptTemplate
|
||||||
|
from langchain_core.runnables import RunnableLambda
|
||||||
|
from retriever import get_retriever
|
||||||
|
from llm import TritonLLM
|
||||||
|
|
||||||
|
def build_chain():
|
||||||
|
retriever = get_retriever()
|
||||||
|
llm = TritonLLM()
|
||||||
|
|
||||||
|
# RAG 프롬프트 템플릿 생성
|
||||||
|
prompt_template = ChatPromptTemplate.from_messages([
|
||||||
|
("system", """다음 정보를 참고하여 사용자의 질문에 답변하세요:
|
||||||
|
|
||||||
|
{context}
|
||||||
|
|
||||||
|
답변할 수 없는 내용이나 주어진 컨텍스트에 없는 내용이면 솔직하게 모른다고 말하세요.
|
||||||
|
답변은 주어진 컨텍스트에 기반하여 구체적이고 간결하게 작성하세요."""),
|
||||||
|
("human", "{question}")
|
||||||
|
])
|
||||||
|
|
||||||
|
def format_docs(docs):
|
||||||
|
return "\n\n".join(f"문서: {i+1}\n{doc.page_content}" for i, doc in enumerate(docs))
|
||||||
|
|
||||||
|
rag_chain = (
|
||||||
|
{
|
||||||
|
"context": RunnableLambda(lambda x: x["question"]) | retriever | format_docs,
|
||||||
|
"question": RunnablePassthrough()
|
||||||
|
}
|
||||||
|
| prompt_template
|
||||||
|
| llm
|
||||||
|
| StrOutputParser()
|
||||||
|
)
|
||||||
|
|
||||||
|
return rag_chain
|
||||||
Loading…
Reference in New Issue
Block a user