ItamarMordo commited on
Commit
a737d59
·
verified ·
1 Parent(s): 26e6977

Update server.py

Browse files
Files changed (1) hide show
  1. server.py +33 -31
server.py CHANGED
@@ -23,7 +23,7 @@ JSON_SOURCE = "database.json"
23
  logging.basicConfig(level=logging.INFO)
24
  logger = logging.getLogger(__name__)
25
 
26
- app = FastAPI(title="Hebrew Smart Home Technician", version="10.0.0")
27
 
28
  app.add_middleware(
29
  CORSMiddleware,
@@ -85,23 +85,27 @@ def expand_query(query: str) -> List[str]:
85
  search_terms.add(f"D{w}")
86
  return list(search_terms)
87
 
88
- def simplify_schematic_text(text: str) -> str:
89
  """
90
- פונקציה קריטית: מנקה את השמות הארוכים והמסובכים ומחליפה אותם בשמות פשוטים בעברית.
91
- זה מקל מאוד על המודל להבין ולתרגם.
92
  """
93
- # החלפת שמות רכיבים ארוכים בשמות קריאים
94
- text = text.replace("ESP32-DEVKITC-32D_ESP32-DEVKITC-30GPIO", "בקר (ESP32)")
95
- text = text.replace("BOB_19002", "ממיר רמות (Level Shifter)")
96
- text = text.replace("TLM-SH_board", "לוח ראשי")
97
- text = text.replace("NEXTION", "מסך")
98
- text = text.replace("LCD1", "מסך")
99
-
100
- # פישוט פעלים
101
- text = text.replace("connects to", "מחובר אל")
102
- text = text.replace("Pin", "פין")
 
 
 
 
103
 
104
- return text
105
 
106
  def query_knowledge_base(query: str) -> str:
107
  conn = sqlite3.connect(DB_FILE)
@@ -119,14 +123,11 @@ def query_knowledge_base(query: str) -> str:
119
  for row_id, content, topic in rows:
120
  if row_id not in seen_ids:
121
  score = 1
122
-
123
- # אם זו שאלה טכנית ויש מידע טכני
124
  if "Schematic" in content and any(x in query for x in ["שרטוט", "חיבור", "פין", "לאן", "מחובר", "מסך"]):
125
  score += 100
126
  elif term.lower() in topic.lower():
127
  score += 10
128
 
129
- # חיפוש מספרים מדויק (כמו 18)
130
  numbers_in_query = [int(s) for s in query.split() if s.isdigit()]
131
  for num in numbers_in_query:
132
  if str(num) in content:
@@ -141,20 +142,21 @@ def query_knowledge_base(query: str) -> str:
141
  if results:
142
  raw_content = results[0][1]
143
 
144
- # אם מצאנו שרטוט, ננקה אותו ונחזיר רק שורות רלוונטיות
145
  if "Schematic" in raw_content:
146
  lines = raw_content.split('\n')
147
  relevant_lines = []
148
  target_terms = [t.lower() for t in search_terms if len(t) > 1]
149
 
150
  for line in lines:
151
- # סינון שורות רלוונטיות בלבד
152
  if "connect" in line.lower() and any(t in line.lower() for t in target_terms):
153
- relevant_lines.append(line.strip())
 
 
154
 
155
- # ניקוי הטקסט (החלפת אנגלית בעברית)
156
- clean_text = simplify_schematic_text("\n".join(relevant_lines))
157
- return f"להלן החיבורים שנמצאו:\n{clean_text}"
158
 
159
  return raw_content
160
 
@@ -218,13 +220,13 @@ async def chat_completions(request: ChatCompletionRequest):
218
 
219
  if context:
220
  sys_msg = (
221
- "תפקידך: טכנאי מומחה לפרויקט 'בית חכם תלם'.\n"
222
  "הנחיות:\n"
223
- "1. דבר בעברית טבעית בלבד.\n"
224
- "2. המידע שתקבל עבר עיבוד והוא מציג חיבורים (למשל: 'מסך פין RX מחובר אל...').\n"
225
- "3. **אל תחזור על הטקסט כמו תוכי!** הפוך אותו לרשימה מסודרת או למשפט הסבר.\n"
226
- "4. דוגמה: 'המסך מחובר לבקר בפיני התקשורת (RX/TX) וכן למתח 5V'.\n"
227
- f"\nמידע מעובד מהמערכת:\n{context}"
228
  )
229
  else:
230
  sys_msg = "אתה עוזר חכם לפרויקט תלם. ענה בעברית. אם אין לך מידע, אמור זאת."
@@ -246,7 +248,7 @@ async def chat_completions(request: ChatCompletionRequest):
246
  top_p=0.9,
247
  do_sample=True,
248
  pad_token_id=tokenizer.eos_token_id,
249
- repetition_penalty=1.1 # מאוזן
250
  )
251
 
252
  if request.stream:
 
23
  logging.basicConfig(level=logging.INFO)
24
  logger = logging.getLogger(__name__)
25
 
26
+ app = FastAPI(title="Hebrew Smart Home Technician", version="10.1.0")
27
 
28
  app.add_middleware(
29
  CORSMiddleware,
 
85
  search_terms.add(f"D{w}")
86
  return list(search_terms)
87
 
88
+ def clean_schematic_line(line: str) -> str:
89
  """
90
+ פונקציית תרגום קריטית: הופכת את הג'יבריש הטכני לעברית קריאה
91
+ לפני שהמודל רואה אותו.
92
  """
93
+ # 1. ניקוי שמות רכיבים ארוכים מה-EasyEDA
94
+ line = line.replace("ESP32 (ESP32-DEVKITC-32D_ESP32-DEVKITC-30GPIO)", "בקר (ESP32)")
95
+ line = line.replace("U2 (ESP32-DEVKITC-32D_ESP32-DEVKITC-30GPIO)", "בקר (ESP32)")
96
+ line = line.replace("06060106_070403 (BOB_19002)", "ממיר רמות (U4)")
97
+ line = line.replace("U4 (BOB_19002)", "ממיר רמות (U4)")
98
+ line = line.replace("040709_0804060105 (0201080606)", "לוח ראשי (U3)")
99
+ line = line.replace("U3 (TLM-SH_board)", "לוח ראשי (U3)")
100
+ line = line.replace("StudentBoard (0201080606)", "לוח ראשי (U3)")
101
+ line = line.replace("LCD1 (NEXTION)", "מסך (Nextion)")
102
+ line = line.replace("HMI (NEXTION)", "מסך (Nextion)")
103
+
104
+ # 2. תרגום פעלים ומונחים
105
+ line = line.replace("connects to", "מחובר אל")
106
+ line = line.replace("Pin", "פין")
107
 
108
+ return line
109
 
110
  def query_knowledge_base(query: str) -> str:
111
  conn = sqlite3.connect(DB_FILE)
 
123
  for row_id, content, topic in rows:
124
  if row_id not in seen_ids:
125
  score = 1
 
 
126
  if "Schematic" in content and any(x in query for x in ["שרטוט", "חיבור", "פין", "לאן", "מחובר", "מסך"]):
127
  score += 100
128
  elif term.lower() in topic.lower():
129
  score += 10
130
 
 
131
  numbers_in_query = [int(s) for s in query.split() if s.isdigit()]
132
  for num in numbers_in_query:
133
  if str(num) in content:
 
142
  if results:
143
  raw_content = results[0][1]
144
 
145
+ # אם זה שרטוט, נבצע ניקוי ותרגום
146
  if "Schematic" in raw_content:
147
  lines = raw_content.split('\n')
148
  relevant_lines = []
149
  target_terms = [t.lower() for t in search_terms if len(t) > 1]
150
 
151
  for line in lines:
152
+ # רק שורות שקשורות לרכיב שהמשתמש שאל עליו
153
  if "connect" in line.lower() and any(t in line.lower() for t in target_terms):
154
+ # תרגום השורה לעברית
155
+ cleaned = clean_schematic_line(line.strip())
156
+ relevant_lines.append(f"- {cleaned}")
157
 
158
+ if relevant_lines:
159
+ return "הנה החיבורים שנמצאו בשרטוט:\n" + "\n".join(relevant_lines)
 
160
 
161
  return raw_content
162
 
 
220
 
221
  if context:
222
  sys_msg = (
223
+ "תפקידך: טכנאי מומחה המסביר על מערכת 'בית חכם תלם'.\n"
224
  "הנחיות:\n"
225
+ "1. דבר בעברית בלבד.\n"
226
+ "2. המידע שתקבל הוא רשימת חיבורים מוכנה בעברית. הצג אותה למשתמש בצורה ברורה.\n"
227
+ "3. אל תמציא מידע שלא מופיע ברשימה.\n"
228
+ "4. סכם את המידע: 'המסך מחובר לבקר בפינים...'.\n"
229
+ f"\nמידע מהמערכת:\n{context}"
230
  )
231
  else:
232
  sys_msg = "אתה עוזר חכם לפרויקט תלם. ענה בעברית. אם אין לך מידע, אמור זאת."
 
248
  top_p=0.9,
249
  do_sample=True,
250
  pad_token_id=tokenizer.eos_token_id,
251
+ repetition_penalty=1.2 # מוגבר למניעת לופים
252
  )
253
 
254
  if request.stream: