フォーマットを整形して出力

app.py

@@ -10,6 +10,7 @@ from langchain.chat_models import ChatOpenAI
 from langchain.agents import initialize_agent, Tool
 from langchain.schema import (
     AIMessage,
+    AgentAction,
     HumanMessage,
     FunctionMessage
 )
@@ -33,6 +34,15 @@ def fetch_folklore(location):
     # 指定された地点の伝承を返す。存在しない場合は不明を返す。
     return folklore_lookup.get(location, "その地域の伝承は不明です。")
 
+def serialize_agent_action(obj):
+    if isinstance(obj, AgentAction):
+        return { "tool": obj.tool, "tool_input": obj.tool_input, "log": obj.log}
+    if isinstance(obj, _FunctionsAgentAction):
+        return { "tool": obj.tool, "tool_input": obj.tool_input, "log": obj.log, "message_log": obj.message_log}
+    if isinstance(obj, AIMessage):
+        return { "content": obj.content, "additional_kwargs": obj.additional_kwargs, "example": obj.example}
+    raise TypeError(f"Type {type(obj)} not serializable")
+
 # LangChainエージェントからレスポンスを取得する関数
 def get_response_from_lang_chain_agent(query_text):
     # ChatOpenAIを使用して言語モデルを初期化
@@ -49,6 +59,9 @@ def get_response_from_lang_chain_agent(query_text):
     agent = initialize_agent(tools, language_model, agent="zero-shot-react-description",
                              verbose=True, return_intermediate_steps=True)
     response = agent({"input": query_text})
+    print(type(response))
+    response = json.dumps(response, default=serialize_agent_action, indent=2, ensure_ascii=False)
+
     return response
 
 # Function Callingからレスポンスを取得する関数
@@ -113,6 +126,7 @@ def get_response_from_function_calling_agent(query_text):
     agent = initialize_agent(tools, language_model, agent=AgentType.OPENAI_FUNCTIONS,
                              verbose=True, return_intermediate_steps=True)
     response = agent({"input": query_text})
+    response = json.dumps(response, default=serialize_agent_action, indent=2, ensure_ascii=False)
     return response
 
 # メインの実行部分

flagged/log.csv

@@ -0,0 +1,82 @@
+query_text,LangChain Agentのレスポンス,Function Callingのレスポンス,Function Calling Agentのレスポンス,flag,username,timestamp
+箱根の伝承を教えてください。,"'{
+  ""input"": ""箱根の伝承を教えてください。"",
+  ""output"": ""Hakone Yosegi-Zaiku is a traditional craft in Hakone that has been passed down since the Edo period."",
+  ""intermediate_steps"": [
+    [
+      {
+        ""tool"": ""Folklore"",
+        ""tool_input"": ""箱根"",
+        ""log"": ""I should use the Folklore tool to find information about the folklore of Hakone.\nAction: Folklore\nAction Input: 箱根""
+      },
+      ""箱根山の自然環境を生かした芸術として、箱根寄木細工は江戸時代から伝わる工芸品です。""
+    ]
+  ]
+}",AIの回答: 箱根山の自然環境を生かした芸術として、箱根寄木細工は江戸時代から伝わる工芸品です。寄木細工は、異なる種類の木材を組み合わせて美しい模様や絵柄を作り出す技法です。箱根の寄木細工は、その技術を活かして箱根の自然風景や動植物を描いた作品が特徴です。また、箱根は古くから温泉地としても知られており、温泉の伝承や神話も多く存在します。例えば、「箱根駅伝」という箱根から東京までの長距離駅伝競走は、箱根の山々を走り抜ける伝統的なイベントとして知られています。,"'{
+  ""input"": ""箱根の伝承を教えてください。"",
+  ""output"": ""箱根には、箱根寄木細工という伝統的な工芸品があります。箱根寄木細工は、箱根山の自然環境を生かした芸術として江戸時代から伝わってきました。この工芸品では、様々な種類の木材を組み合わせて美しい模様を作り出します。箱根寄木細工は、木材の組み合わせや彫刻技術によって繊細な模様や景色を表現することが特徴です。箱根の伝統的な文化として、寄木細工は観光客にも人気があります。"",
+  ""intermediate_steps"": [
+    [
+      {
+        ""tool"": ""Folklore"",
+        ""tool_input"": ""箱根"",
+        ""log"": ""\nInvoking: `Folklore` with `箱根`\n\n\n""
+      },
+      ""箱根山の自然環境を生かした芸術として、箱根寄木細工は江戸時代から伝わる工芸品です。""
+    ]
+  ]
+}",,,2023-07-14 17:37:42.832325
+佐渡にはどんな伝承がありますか？,"'{
+  ""input"": ""佐渡にはどんな伝承がありますか？"",
+  ""output"": ""One of the folklore in Sado is the Fukuhimatsuri festival, which is held once a year and is a traditional festival to ward off evil spirits."",
+  ""intermediate_steps"": [
+    [
+      {
+        ""tool"": ""Folklore"",
+        ""tool_input"": ""佐渡"",
+        ""log"": ""I should use the Folklore tool to find information about the folklore in Sado.\nAction: Folklore\nAction Input: 佐渡""
+      },
+      ""焚く火祭は年に一度、佐渡島で行われる伝統的なお祭りで、邪気を払う象徴とされています。""
+    ]
+  ]
+}",AIの回答: 佐渡には焚く火祭という伝統的なお祭りがあります。このお祭りは年に一度、佐渡島で行われ、邪気を払うために焚かれる火を中心に行われます。焚く火祭は佐渡の伝統的な伝承の一つであり、地域の人々にとって重要な行事です。,"'{
+  ""input"": ""佐渡にはどんな伝承がありますか？"",
+  ""output"": ""佐渡には焚く火祭という伝承があります。焚く火祭は年に一度、佐渡島で行われる伝統的なお祭りです。このお祭りでは、大きな篝火が焚かれ、参加者がその周りを囲んで踊ります。焚く火祭は邪気を払う象徴とされており、地元の人々にとっては大切な行事です。"",
+  ""intermediate_steps"": [
+    [
+      {
+        ""tool"": ""Folklore"",
+        ""tool_input"": ""佐渡"",
+        ""log"": ""\nInvoking: `Folklore` with `佐渡`\n\n\n""
+      },
+      ""焚く火祭は年に一度、佐渡島で行われる伝統的なお祭りで、邪気を払う象徴とされています。""
+    ]
+  ]
+}",,,2023-07-14 17:40:26.917775
+日下部民藝館にはどんな伝統がありますか？,"'{
+  ""input"": ""日下部民藝館にはどんな伝統がありますか？"",
+  ""output"": ""The 日下部民藝館 showcases traditional crafts from various regions in Japan, highlighting the traditional techniques passed down through generations by local people."",
+  ""intermediate_steps"": [
+    [
+      {
+        ""tool"": ""Folklore"",
+        ""tool_input"": ""日下部民藝館"",
+        ""log"": ""I should use the Folklore tool to find information about the 日下部民藝館.\nAction: Folklore\nAction Input: 日下部民藝館""
+      },
+      ""日本各地の美しい民芸品が集められ、展示されている美術館です。ここでは地元の人々が代々受け���いできた伝統的な技術が生かされた作品を見ることができます。""
+    ]
+  ]
+}",AIの回答: 日下部民藝館では、日本各地の美しい民芸品が展示されています。この美術館では、地元の人々が代々受け継いできた伝統的な技術が生かされた作品を鑑賞することができます。具体的な伝統については、詳細な情報が必要です。もしご存知の特定の伝統があれば、お知らせください。,"'{
+  ""input"": ""日下部民藝館にはどんな伝統がありますか？"",
+  ""output"": ""日下部民藝館では、日本各地の美しい民芸品が集められ、展示されています。ここでは地元の人々が代々受け継いできた伝統的な技術が生かされた作品を見ることができます。詳細な展示内容や特色については、館内での展示やイベント情報をご確認ください。"",
+  ""intermediate_steps"": [
+    [
+      {
+        ""tool"": ""Folklore"",
+        ""tool_input"": ""日下部民藝館"",
+        ""log"": ""\nInvoking: `Folklore` with `日下部民藝館`\n\n\n""
+      },
+      ""日本各地の美しい民芸品が集められ、展示されている美術館です。ここでは地元の人々が代々受け継いできた伝統的な技術が生かされた作品を見ることができます。""
+    ]
+  ]
+}",,,2023-07-14 17:58:53.065735