Spaces:
Sleeping
Sleeping
Update server.py
Browse files
server.py
CHANGED
|
@@ -83,20 +83,15 @@ def expand_query(query: str) -> List[str]:
|
|
| 83 |
return list(search_terms)
|
| 84 |
|
| 85 |
def simplify_schematic_text(text: str) -> str:
|
| 86 |
-
"
|
| 87 |
-
מנקה את הטקסט ומפרמטת אותו למבנה שהמודל לא יכול לטעות בו.
|
| 88 |
-
המטרה: למנוע מהמודל 'לחשוב' על רכיבים, אלא רק להקריא נתונים.
|
| 89 |
-
"""
|
| 90 |
-
|
| 91 |
-
# 1. הסרת מק"טים בסוגריים (למשל BOB_19002) - זה הגורם מס' 1 להזיות
|
| 92 |
text = re.sub(r'\([A-Za-z0-9_\-]+\)', '', text)
|
| 93 |
|
| 94 |
-
# 2. פישוט שמות פינים
|
| 95 |
text = text.replace("D16_or_RX2", "RX2")
|
| 96 |
text = text.replace("D17_or_TX2", "TX2")
|
| 97 |
text = text.replace("3V3", "3.3V")
|
| 98 |
|
| 99 |
-
# 3. תרגום
|
| 100 |
replacements = {
|
| 101 |
"ESP32-DEVKITC-32D_ESP32-DEVKITC-30GPIO": "בקר ESP32",
|
| 102 |
"LevelConvertor": "ממיר רמות",
|
|
@@ -104,17 +99,17 @@ def simplify_schematic_text(text: str) -> str:
|
|
| 104 |
"HMI": "מסך",
|
| 105 |
"TLM-SH_board": "לוח ראשי",
|
| 106 |
"StudentBoard": "לוח תלמיד",
|
| 107 |
-
"connects to": "--- מחובר אל --->",
|
| 108 |
"Pin": "פין"
|
| 109 |
}
|
| 110 |
|
| 111 |
for eng, heb in replacements.items():
|
| 112 |
text = text.replace(eng, heb)
|
| 113 |
|
| 114 |
-
# 4. מחיקת רעש (U1, U2
|
| 115 |
text = re.sub(r'\b[UJ]\d+\b', '', text)
|
| 116 |
|
| 117 |
-
# 5. ניקוי
|
| 118 |
text = text.replace("Pin Pin", "פין")
|
| 119 |
text = text.replace("פין פין", "פין")
|
| 120 |
text = re.sub(r'\s+', ' ', text).strip()
|
|
@@ -128,26 +123,33 @@ def query_knowledge_base(query: str) -> str:
|
|
| 128 |
search_terms = expand_query(query)
|
| 129 |
logger.info(f"🔍 Searching for: {search_terms}")
|
| 130 |
|
|
|
|
|
|
|
|
|
|
| 131 |
results = []
|
| 132 |
seen_ids = set()
|
| 133 |
|
| 134 |
for term in search_terms:
|
|
|
|
| 135 |
cursor.execute("SELECT id, content, topic FROM knowledge WHERE content LIKE ? OR topic LIKE ?", (f'%{term}%', f'%{term}%'))
|
| 136 |
rows = cursor.fetchall()
|
| 137 |
for row_id, content, topic in rows:
|
| 138 |
if row_id not in seen_ids:
|
| 139 |
score = 1
|
| 140 |
-
|
| 141 |
-
|
| 142 |
-
score += 100
|
| 143 |
elif term.lower() in topic.lower():
|
| 144 |
score += 10
|
| 145 |
-
numbers_in_query = [int(s) for s in query.split() if s.isdigit()]
|
| 146 |
-
for num in numbers_in_query:
|
| 147 |
-
if str(num) in content:
|
| 148 |
-
score += 50
|
| 149 |
results.append((score, content))
|
| 150 |
seen_ids.add(row_id)
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 151 |
conn.close()
|
| 152 |
|
| 153 |
results.sort(key=lambda x: x[0], reverse=True)
|
|
@@ -155,25 +157,24 @@ def query_knowledge_base(query: str) -> str:
|
|
| 155 |
if results:
|
| 156 |
raw_content = results[0][1]
|
| 157 |
|
| 158 |
-
# טיפול מיוחד לשרטוטים
|
| 159 |
if "Schematic" in raw_content:
|
| 160 |
lines = raw_content.split('\n')
|
| 161 |
relevant_lines = []
|
| 162 |
|
| 163 |
-
#
|
| 164 |
-
|
| 165 |
-
|
| 166 |
-
|
| 167 |
-
|
| 168 |
-
|
| 169 |
-
|
| 170 |
-
|
| 171 |
-
|
| 172 |
-
if any(t in
|
| 173 |
relevant_lines.append(line.strip())
|
| 174 |
|
| 175 |
clean_text = simplify_schematic_text("\n".join(relevant_lines))
|
| 176 |
-
return f"להלן רשימת החיבורים
|
| 177 |
|
| 178 |
return raw_content
|
| 179 |
return ""
|
|
@@ -194,7 +195,7 @@ class Message(BaseModel):
|
|
| 194 |
class ChatCompletionRequest(BaseModel):
|
| 195 |
messages: List[Message]
|
| 196 |
max_tokens: Optional[int] = 1024
|
| 197 |
-
temperature: Optional[float] = 0.1
|
| 198 |
stream: Optional[bool] = False
|
| 199 |
|
| 200 |
@app.on_event("startup")
|
|
@@ -211,21 +212,19 @@ async def chat_completions(request: ChatCompletionRequest):
|
|
| 211 |
save_message("user", last_user_msg.content)
|
| 212 |
context = query_knowledge_base(last_user_msg.content)
|
| 213 |
|
| 214 |
-
# System Prompt אגרסיבי למניעת המצאות
|
| 215 |
sys_msg = (
|
| 216 |
"תפקידך: טכנאי מומחה לפרויקט 'בית חכם תלם'.\n"
|
| 217 |
-
"הנחיות קריטיות
|
| 218 |
-
"1. **
|
| 219 |
-
"2. **
|
| 220 |
-
"3. **
|
| 221 |
-
"4.
|
| 222 |
-
"5. **מבנה התשובה**: הצג את החיבורים בצורה של רשימה מסודרת ופשוטה.\n"
|
| 223 |
)
|
| 224 |
|
| 225 |
if context:
|
| 226 |
-
sys_msg += f"\n---
|
| 227 |
else:
|
| 228 |
-
sys_msg += "\n(לא נמצא מידע ספציפי במערכת,
|
| 229 |
|
| 230 |
messages_payload = [msg.dict() for msg in request.messages]
|
| 231 |
|
|
|
|
| 83 |
return list(search_terms)
|
| 84 |
|
| 85 |
def simplify_schematic_text(text: str) -> str:
|
| 86 |
+
# 1. הסרת מק"טים בסוגריים
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 87 |
text = re.sub(r'\([A-Za-z0-9_\-]+\)', '', text)
|
| 88 |
|
| 89 |
+
# 2. פישוט שמות פינים
|
| 90 |
text = text.replace("D16_or_RX2", "RX2")
|
| 91 |
text = text.replace("D17_or_TX2", "TX2")
|
| 92 |
text = text.replace("3V3", "3.3V")
|
| 93 |
|
| 94 |
+
# 3. תרגום
|
| 95 |
replacements = {
|
| 96 |
"ESP32-DEVKITC-32D_ESP32-DEVKITC-30GPIO": "בקר ESP32",
|
| 97 |
"LevelConvertor": "ממיר רמות",
|
|
|
|
| 99 |
"HMI": "מסך",
|
| 100 |
"TLM-SH_board": "לוח ראשי",
|
| 101 |
"StudentBoard": "לוח תלמיד",
|
| 102 |
+
"connects to": "--- מחובר אל --->",
|
| 103 |
"Pin": "פין"
|
| 104 |
}
|
| 105 |
|
| 106 |
for eng, heb in replacements.items():
|
| 107 |
text = text.replace(eng, heb)
|
| 108 |
|
| 109 |
+
# 4. מחיקת רעש (U1, U2...)
|
| 110 |
text = re.sub(r'\b[UJ]\d+\b', '', text)
|
| 111 |
|
| 112 |
+
# 5. ניקוי
|
| 113 |
text = text.replace("Pin Pin", "פין")
|
| 114 |
text = text.replace("פין פין", "פין")
|
| 115 |
text = re.sub(r'\s+', ' ', text).strip()
|
|
|
|
| 123 |
search_terms = expand_query(query)
|
| 124 |
logger.info(f"🔍 Searching for: {search_terms}")
|
| 125 |
|
| 126 |
+
# בדיקה האם זו שאלה כללית על חיבורים (ללא רכיב ספציפי)
|
| 127 |
+
is_general_schematic_query = any(x in query for x in ["הכל", "כל החיבורים", "שרטוט", "מה מחובר", "לאן", "פינים"])
|
| 128 |
+
|
| 129 |
results = []
|
| 130 |
seen_ids = set()
|
| 131 |
|
| 132 |
for term in search_terms:
|
| 133 |
+
# שליפה רחבה יותר
|
| 134 |
cursor.execute("SELECT id, content, topic FROM knowledge WHERE content LIKE ? OR topic LIKE ?", (f'%{term}%', f'%{term}%'))
|
| 135 |
rows = cursor.fetchall()
|
| 136 |
for row_id, content, topic in rows:
|
| 137 |
if row_id not in seen_ids:
|
| 138 |
score = 1
|
| 139 |
+
if "Schematic" in content:
|
| 140 |
+
score += 100 # תמיד תעדיף שרטוטים
|
|
|
|
| 141 |
elif term.lower() in topic.lower():
|
| 142 |
score += 10
|
|
|
|
|
|
|
|
|
|
|
|
|
| 143 |
results.append((score, content))
|
| 144 |
seen_ids.add(row_id)
|
| 145 |
+
|
| 146 |
+
# אם לא נמצא כלום בחיפוש הספציפי אבל המשתמש שאל על שרטוט, נביא את השרטוט בכל זאת
|
| 147 |
+
if not results and is_general_schematic_query:
|
| 148 |
+
cursor.execute("SELECT id, content, topic FROM knowledge WHERE content LIKE '%Schematic%'")
|
| 149 |
+
row = cursor.fetchone()
|
| 150 |
+
if row:
|
| 151 |
+
results.append((100, row[1]))
|
| 152 |
+
|
| 153 |
conn.close()
|
| 154 |
|
| 155 |
results.sort(key=lambda x: x[0], reverse=True)
|
|
|
|
| 157 |
if results:
|
| 158 |
raw_content = results[0][1]
|
| 159 |
|
|
|
|
| 160 |
if "Schematic" in raw_content:
|
| 161 |
lines = raw_content.split('\n')
|
| 162 |
relevant_lines = []
|
| 163 |
|
| 164 |
+
# אם זו שאלה כללית - תביא את הכל! אל תסנן.
|
| 165 |
+
if is_general_schematic_query:
|
| 166 |
+
for line in lines:
|
| 167 |
+
if "connect" in line.lower():
|
| 168 |
+
relevant_lines.append(line.strip())
|
| 169 |
+
else:
|
| 170 |
+
# סינון רגיל לפי מילות מפתח
|
| 171 |
+
target_terms = [t.lower() for t in search_terms if len(t) > 1]
|
| 172 |
+
for line in lines:
|
| 173 |
+
if "connect" in line.lower() and any(t in line.lower() for t in target_terms):
|
| 174 |
relevant_lines.append(line.strip())
|
| 175 |
|
| 176 |
clean_text = simplify_schematic_text("\n".join(relevant_lines))
|
| 177 |
+
return f"להלן רשימת החיבורים שנמצאו:\n{clean_text}"
|
| 178 |
|
| 179 |
return raw_content
|
| 180 |
return ""
|
|
|
|
| 195 |
class ChatCompletionRequest(BaseModel):
|
| 196 |
messages: List[Message]
|
| 197 |
max_tokens: Optional[int] = 1024
|
| 198 |
+
temperature: Optional[float] = 0.1
|
| 199 |
stream: Optional[bool] = False
|
| 200 |
|
| 201 |
@app.on_event("startup")
|
|
|
|
| 212 |
save_message("user", last_user_msg.content)
|
| 213 |
context = query_knowledge_base(last_user_msg.content)
|
| 214 |
|
|
|
|
| 215 |
sys_msg = (
|
| 216 |
"תפקידך: טכנאי מומחה לפרויקט 'בית חכם תלם'.\n"
|
| 217 |
+
"הנחיות קריטיות:\n"
|
| 218 |
+
"1. **העתק בלבד**: רשום אך ורק את החיבורים שמופיעים בטקסט למטה.\n"
|
| 219 |
+
"2. **איסור המצאות**: אם החיבור לא מופיע ברשימה, אל תכתוב אותו.\n"
|
| 220 |
+
"3. **מניעת לולאות**: בשום אופן אל תייצר רשימות סדרתיות (כמו D1, D2, D3...) אלא אם הן מופיעות במפורש.\n"
|
| 221 |
+
"4. העתק את שמות הפינים (HV1, RX, D16) בדיוק כפי שהם.\n"
|
|
|
|
| 222 |
)
|
| 223 |
|
| 224 |
if context:
|
| 225 |
+
sys_msg += f"\n--- רשימת החיבורים המאושרת (אסור לחרוג ממנה) ---\n{context}\n------------------------------------"
|
| 226 |
else:
|
| 227 |
+
sys_msg += "\n(לא נמצא מידע ספציפי. ענה: 'אין לי מידע על חיבורים אלו במערכת, אנא היה ספציפי יותר')."
|
| 228 |
|
| 229 |
messages_payload = [msg.dict() for msg in request.messages]
|
| 230 |
|