Update app.py

app.py

@@ -48,32 +48,37 @@ def convert_image_to_dataurl(image):
     return f"data:image/png;base64,{img_str}"
 
 def respond(message, history, system_message, max_tokens, temperature, top_p, model_choice, web_search, image=None):
+    # 履歴が長すぎないようにトークン数を制限
     history = truncate_history(history, max_tokens=2048)
 
+    # システムメッセージを先頭に追加
     messages = [{"role": "system", "content": system_message}]
     
+    # これまでの会話履歴を追加
     for user_msg, assistant_msg in history:
         if user_msg:
             messages.append({"role": "user", "content": user_msg})
         if assistant_msg:
             messages.append({"role": "assistant", "content": assistant_msg})
-
-    # 画像データの追加
+    
+    # 今回のユーザーメッセージを追加
     if image:
+        # 画像をリサイズしてデータ量を削減
         img = Image.open(io.BytesIO(base64.b64decode(image.split(",")[1])))
-        img = img.resize((512, 512))
+        img = img.resize((512, 512))  # サイズ縮小
         buffered = io.BytesIO()
         img.save(buffered, format="PNG")
         img_data = base64.b64encode(buffered.getvalue()).decode("utf-8")
 
-        # 画像は「content」に直接入れず、「messages」にオブジェクトとして追加
-        messages.append(message)
+        # 画像データを適切に埋め込む
+        image_message = [{"type": "image_url", "image_url": {"url": f"data:image/png;base64,{img_data}"}}]
+        messages.append({"role": "user", "content": image_message})
     else:
         messages.append({"role": "user", "content": message})
 
     try:
         response = client.chat.completions.create(
-            model="gpt-4o",  # 画像対応モデルに変更
+            model=model_choice,
             messages=messages,
             max_tokens=max_tokens,
             temperature=temperature,
@@ -148,4 +153,4 @@ with gr.Blocks() as demo:
         outputs=[chatbot_input, chat_history_display, state]
     )
 
-demo.launch()
+demo.launch()