Merge remote-tracking branch 'origin/develop' into feature/cancel_sub_model

# Conflicts:
#	backend/services/prompt_service.py
#	frontend/app/[locale]/setup/models/components/modelConfig.tsx
#	test/backend/services/test_prompt_service.py

Author: ljy65535

backend/consts/const.py

@@ -238,3 +238,7 @@
     "PROCESS_FAILED": "PROCESS_FAILED",
     "FORWARD_FAILED": "FORWARD_FAILED",
 }
+
+# Deep Thinking Constants
+THINK_START_PATTERN = "<think>"
+THINK_END_PATTERN = "</think>"

backend/database/tool_db.py

@@ -164,7 +164,8 @@ def add_tool_field(tool_info):
         # add tool params
         tool_params = tool.params
         for ele in tool_params:
-            ele["default"] = tool_info["params"][ele["name"]]
+            param_name = ele["name"]
+            ele["default"] = tool_info["params"].get(param_name)
 
         tool_dict = as_dict(tool)
         tool_dict["params"] = tool_params

backend/database/user_tenant_db.py

@@ -3,6 +3,7 @@
 """
 from typing import Any, Dict, Optional
 
+from consts.const import DEFAULT_TENANT_ID
 from database.client import as_dict, get_db_session
 from database.db_models import UserTenant
 
@@ -28,6 +29,27 @@ def get_user_tenant_by_user_id(user_id: str) -> Optional[Dict[str, Any]]:
         return None
 
 
+def get_all_tenant_ids() -> list[str]:
+    """
+    Get all unique tenant IDs from the database
+    
+    Returns:
+        list[str]: List of unique tenant IDs
+    """
+    with get_db_session() as session:
+        result = session.query(UserTenant.tenant_id).filter(
+            UserTenant.delete_flag == "N"
+        ).distinct().all()
+        
+        tenant_ids = [row[0] for row in result]
+        
+        # Add default tenant_id if not already in the list
+        if DEFAULT_TENANT_ID not in tenant_ids:
+            tenant_ids.append(DEFAULT_TENANT_ID)
+        
+        return tenant_ids
+
+
 def insert_user_tenant(user_id: str, tenant_id: str):
     """
     Insert user tenant relationship

backend/main_service.py

@@ -1,19 +1,39 @@
 import uvicorn
 import logging
 import warnings
+import asyncio
 warnings.filterwarnings("ignore", category=UserWarning)
 
 from dotenv import load_dotenv
 load_dotenv()
 
 from apps.base_app import app
 from utils.logging_utils import configure_logging, configure_elasticsearch_logging
+from services.tool_configuration_service import initialize_tools_on_startup
 
 
 configure_logging(logging.INFO)
 configure_elasticsearch_logging()
 logger = logging.getLogger("main_service")
 
+
+async def startup_initialization():
+    """
+    Perform initialization tasks during server startup
+    """
+    logger.info("Starting server initialization...")
+    
+    try:
+        # Initialize tools on startup - service layer handles detailed logging
+        await initialize_tools_on_startup()
+        logger.info("Server initialization completed successfully!")
+            
+    except Exception as e:
+        logger.error(f"Server initialization failed: {str(e)}")
+        # Don't raise the exception to allow server to start even if initialization fails
+        logger.warning("Server will continue to start despite initialization issues")
+
+
 if __name__ == "__main__":
-    # Scan agents and update to database
+    asyncio.run(startup_initialization())
     uvicorn.run(app, host="0.0.0.0", port=5010, log_level="info")

backend/prompts/managed_system_prompt_template.yaml

@@ -61,6 +61,8 @@ system_prompt: |-
      - 用简单的Python编写代码
      - 遵循python代码规范和python语法
      - 根据格式规范正确调用工具
+     - 考虑到代码执行与展示用户代码的区别，使用'代码：\n```<RUN>\n'开头，并以'```<END_CODE>'表达运行代码，使用'代码：\n```<DISPLAY:语言类型>\n'开头，并以'```<END_CODE>'表达展示代码
+     - 注意运行的代码不会被用户看到，所以如果用户需要看到代码，你需要使用'代码：\n```<DISPLAY:语言类型>\n'开头，并以'```<END_CODE>'表达展示代码。
 
   3. 观察结果：
      - 查看代码执行结果
@@ -99,7 +101,7 @@ system_prompt: |-
   {{ constraint }}
 
   ### python代码规范
-  1. 如果认为是需要执行的代码，代码内容以'代码：\n```py\n'开头，并以'```<end_code>'标识符结尾。如果是不需要执行仅用于展示的代码，代码内容以'代码：\n```code:语言类型\n'开头，并以'```<end_code>'标识符结尾，其中语言类型例如python、java、javascript等；
+  1. 如果认为是需要执行的代码，代码内容以'代码：\n```<RUN>\n'开头，并以'```<END_CODE>'标识符结尾。如果是不需要执行仅用于展示的代码，代码内容以'代码：\n```<DISPLAY:语言类型>\n'开头，并以'```<END_CODE>'标识符结尾，其中语言类型例如python、java、javascript等；
   2. 只使用已定义的变量，变量将在多次调用之间持续保持；
   3. 使用“print()”函数让下一次的模型调用看到对应变量信息；
   4. 正确使用工具的入参，使用关键字参数，不要用字典形式；

backend/prompts/managed_system_prompt_template_en.yaml

@@ -61,6 +61,8 @@ system_prompt: |-
      - Write code in simple Python
      - Follow Python coding standards and Python syntax
      - Call tools correctly according to format specifications
+     - To distinguish between code execution and displaying user code, use 'Code: \n```<RUN>\n' to start executing code and '```<END_CODE>' to indicate its completion. Use 'Code: \n```<DISPLAY:language_type>\n' to start displaying code and '```<END_CODE>' to indicate its completion.
+     - Note that executed code is not visible to users. If users need to see the code, use 'Code: \n```<DISPLAY:language_type>\n' as the start and '```<END_CODE>' to denote displayed code.
 
   3. Observe Results:
      - View code execution results
@@ -99,7 +101,7 @@ system_prompt: |-
   {{ constraint }}
 
   ### Python Code Specifications
-  1. If it is considered to be code that needs to be executed, the code content begins with 'code: \n```py\n' and ends with '```<end_code>'. If the code does not need to be executed for display only, the code content begins with 'code:\n```code:language_type\n', and ends with '```<end_code>', where language_type can be python, java, javascript, etc;
+  1. If it is considered to be code that needs to be executed, the code content begins with 'code: \n```<RUN>\n' and ends with '```<END_CODE>'. If the code does not need to be executed for display only, the code content begins with 'code:\n```<DISPLAY:language_type>\n', and ends with '```<END_CODE>', where language_type can be python, java, javascript, etc;
   2. Only use defined variables, variables will persist between multiple calls;
   3. Use "print()" function to let the next model call see corresponding variable information;
   4. Use tool input parameters correctly, use keyword arguments, not dictionary format;

backend/prompts/manager_system_prompt_template.yaml

@@ -62,6 +62,8 @@ system_prompt: |-
      - 用简单的Python编写代码
      - 遵循python代码规范和python语法
      - 正确调用工具或助手解决问题
+     - 考虑到代码执行与展示用户代码的区别，使用'代码：\n```<RUN>\n'开头，并以'```<END_CODE>'表达运行代码，使用'代码：\n```<DISPLAY:语言类型>\n'开头，并以'```<END_CODE>'表达展示代码
+     - 注意运行的代码不会被用户看到，所以如果用户需要看到代码，你需要使用'代码：\n```<DISPLAY:语言类型>\n'开头，并以'```<END_CODE>'表达展示代码。
 
   3. 观察结果：
      - 查看代码执行结果
@@ -127,7 +129,7 @@ system_prompt: |-
   {{ constraint }}
   
   ### python代码规范
-  1. 如果认为是需要执行的代码，代码内容以'代码：\n```py\n'开头，并以'```<end_code>'标识符结尾。如果是不需要执行仅用于展示的代码，代码内容以'代码：\n```code:语言类型\n'开头，并以'```<end_code>'标识符结尾，其中语言类型例如python、java、javascript等；
+  1. 如果认为是需要执行的代码，代码内容以'代码：\n```<RUN>\n'开头，并以'```<END_CODE>'标识符结尾。如果是不需要执行仅用于展示的代码，代码内容以'代码：\n```<DISPLAY:语言类型>\n'开头，并以'```<END_CODE>'标识符结尾，其中语言类型例如python、java、javascript等；
   2. 只使用已定义的变量，变量将在多次调用之间持续保持；
   3. 使用“print()”函数让下一次的模型调用看到对应变量信息；
   4. 正确使用工具/助手的入参，使用关键字参数，不要用字典形式；

backend/prompts/manager_system_prompt_template_en.yaml

@@ -62,6 +62,8 @@ system_prompt: |-
      - Write code in simple Python
      - Follow Python coding standards and Python syntax
      - Correctly call tools or agents to solve problems
+     - To distinguish between code execution and displaying user code, use 'Code: \n```<RUN>\n' to start executing code and '```<END_CODE>' to indicate its completion. Use 'Code: \n```<DISPLAY:language_type>\n' to start displaying code and '```<END_CODE>' to indicate its completion.
+     - Note that executed code is not visible to users. If users need to see the code, use 'Code: \n```<DISPLAY:language_type>\n' as the start and '```<END_CODE>' to denote displayed code.
 
   3. Observe Results:
      - View code execution results
@@ -127,7 +129,7 @@ system_prompt: |-
   {{ constraint }}
   
   ### Python Code Specifications
-  1. If it is considered to be code that needs to be executed, the code content begins with 'code: \n```py\n' and ends with '```<end_code>'. If the code does not need to be executed for display only, the code content begins with 'code: \n```code:language_type\n', and ends with '```<end_code>', where language_type can be python, java, javascript, etc;
+  1. If it is considered to be code that needs to be executed, the code content begins with 'code: \n```<RUN>\n' and ends with '```<END_CODE>'. If the code does not need to be executed for display only, the code content begins with 'code: \n```<DISPLAY:language_type>\n', and ends with '```<END_CODE>', where language_type can be python, java, javascript, etc;
   2. Only use defined variables, variables will persist between multiple calls;
   3. Use "print()" function to let the next model call see corresponding variable information;
   4. Use tool/agent input parameters correctly, use keyword arguments, not dictionary format;

backend/prompts/utils/prompt_generate.yaml

@@ -52,14 +52,16 @@ FEW_SHOTS_SYSTEM_PROMPT: |-
      - 用简单的Python编写代码
      - 遵循python代码规范和python语法
      - 根据格式规范正确调用工具/助手
+     - 考虑到代码执行与展示用户代码的区别，使用'代码：\n```<RUN>\n'开头，并以'```<END_CODE>'表达运行代码，使用'代码：\n```<DISPLAY:语言类型>\n'开头，并以'```<END_CODE>'表达展示代码
+     - 注意运行的代码不会被用户看到，所以如果用户需要看到代码，你需要使用'代码：\n```<DISPLAY:语言类型>\n'开头，并以'```<END_CODE>'表达展示代码。
 
   3. 观察结果：
      - 查看代码执行结果
   
   在思考结束后，当Agent认为可以回答用户问题，那么可以不生成代码，直接生成最终回答给到用户并停止循环。
 
   ### python代码规范
-  1. 如果认为是需要执行的代码，代码内容以'代码：\n```py\n'开头，并以'```<end_code>'标识符结尾。如果是不需要执行仅用于展示的代码，代码内容以'代码：\n```code:语言类型\n'开头，并以'```<end_code>'标识符结尾，其中语言类型例如python、java、javascript等；
+  1. 如果认为是需要执行的代码，代码内容以'代码：\n```<RUN>\n'开头，并以'```<END_CODE>'标识符结尾。如果是不需要执行仅用于展示的代码，代码内容以'代码：\n```<DISPLAY:语言类型>\n'开头，并以'```<END_CODE>'标识符结尾，其中语言类型例如python、java、javascript等；
   2. 只使用已定义的变量，变量将在多次调用之间持续保持；
   3. 使用“print()”函数让下一次的模型调用看到对应变量信息；
   4. 正确使用工具/助手的入参，使用关键字参数，不要用字典形式；
@@ -76,18 +78,18 @@ FEW_SHOTS_SYSTEM_PROMPT: |-
   
   思考：我先使用knowledge_base_search工具查找本地知识库是否有相关信息。
   代码：
-  ```py
+  ```<RUN>
   knowledge_info = knowledge_base_search(query="东方明珠 介绍", index_names=["本地知识库1"， "本地知识库2"])
   print(knowledge_info)
-  ```<end_code>
+  ```<END_CODE>
   观察结果：未找到查询"东方明珠 介绍"的结果。检索结果难以支撑回答。
   
   思考：从本地知识库中没有找到相关信息，我需要使用web_search工具查询网络信息。
   代码：
-  ```py
+  ```<RUN>
   web_info = web_search(query="东方明珠 介绍")
   print(web_info)
-  ```<end_code>
+  ```<END_CODE>
   观察结果：东方明珠广播电视塔位于中国上海市浦东新区陆家嘴... 
   
   思考：我已经获得了有关信息，现在我将生成最终回答。
@@ -99,10 +101,10 @@ FEW_SHOTS_SYSTEM_PROMPT: |-
   
   思考：我需要调用旅程规划助手来规划出行。
   代码：
-  ```py
+  ```<RUN>
   itinerary_result = travel_planning_assistant(task="帮我规划明天从上海出发去北京的行程")
   print(itinerary_result)
-  ```<end_code>
+  ```<END_CODE>
   观察结果：明天从上海出发去北京的行程规划，包括交通、住宿、景点等。
   
   思考：我已经获得了出行规划，现在我将生成最终回答。
@@ -114,18 +116,18 @@ FEW_SHOTS_SYSTEM_PROMPT: |-
   
   思考：我需要先获取天气数据，然后让分析助手帮我分析。
   代码：
-  ```py
+  ```<RUN>
   weather_data = weather_api(city="北京")
   print(weather_data)
-  ```<end_code>
+  ```<END_CODE>
   观察结果：{"temperature": 25, "humidity": 60%, "condition": "晴天"}
   
   思考：现在我有天气数据了，让分析助手帮我分析这些数据。
   代码：
-  ```py
+  ```<RUN>
   analysis_result = data_analysis_assistant(task="分析今天的天气数据：温度25度，湿度60%，晴天")
   print(analysis_result)
-  ```<end_code>
+  ```<END_CODE>
   观察结果：今天天气适宜，温度适中，湿度正常，适合户外活动。
   
   思考：我已经获得了天气数据和分析结果，现在我将生成最终回答。
@@ -147,9 +149,9 @@ FEW_SHOTS_SYSTEM_PROMPT: |-
   
   任务5："帮我用Python写一个快速排序的代码"
 
-  思考：我需要直接写一个python代码，此代码仅用于展示，因此我以'代码：\n```code:python\n'开头。
+  思考：我需要直接写一个python代码，此代码仅用于展示，因此我以'代码：\n```<DISPLAY:python>\n'开头。
   代码：
-  ```code:python
+  ```<DISPLAY:python>
   def quick_sort(arr):
     if len(arr) <= 1:
       return arr
@@ -158,12 +160,12 @@ FEW_SHOTS_SYSTEM_PROMPT: |-
     middle = [x for x in arr if x == pivot]
     right = [x for x in arr if x > pivot]
     return quick_sort(left) + middle + quick_sort(right)
-  ```<end_code>
+  ```<END_CODE>
   观察结果：快速排序的python代码。
   
   思考：我已经获得了快速排序的python代码，现在我将生成最终回答。
   快速排序的python代码如下：
-  ```code:python
+  ```<DISPLAY:python>
   def quick_sort(arr):
     if len(arr) <= 1:
       return arr
@@ -172,7 +174,7 @@ FEW_SHOTS_SYSTEM_PROMPT: |-
     middle = [x for x in arr if x == pivot]
     right = [x for x in arr if x > pivot]
     return quick_sort(left) + middle + quick_sort(right)
-  ```<end_code>
+  ```<END_CODE>
 
   ---