antimoda1 commited on
Commit ·
de448c9
1
Parent(s): 09bc630
remove unused
Browse files
app.py
CHANGED
|
@@ -31,25 +31,7 @@ def perform_search(query, top_k, year_from, year_to):
|
|
| 31 |
|
| 32 |
# Выполняем поиск BM25
|
| 33 |
scores = retrieval.bm25_search(query)
|
| 34 |
-
scores = list(scores) # Преобразуем в список если это ndarray
|
| 35 |
-
|
| 36 |
-
# Повышаем scores для документов, названия которых содержат паттерн маршрута из query
|
| 37 |
-
# Паттерн: [АМт]\d{2} (буква А, М или Т + две цифры, например А10, М30, Т2)
|
| 38 |
-
pattern = r'[АМт]\d{2}'
|
| 39 |
-
matches = re.findall(pattern, query)
|
| 40 |
-
|
| 41 |
-
if matches:
|
| 42 |
-
max_score = max(scores) if scores else 0
|
| 43 |
-
boost_score = max_score + 1 # Максимальный score + 1
|
| 44 |
-
|
| 45 |
-
for match in set(matches): # Используем set чтобы избежать дубликатов
|
| 46 |
-
# Ищем документы, которые содержат этот паттерн в названии
|
| 47 |
-
for doc_id, doc_name in enumerate(retrieval.docs_names):
|
| 48 |
-
if match in doc_name:
|
| 49 |
-
# Повышаем scores всех чанков из этого документа
|
| 50 |
-
for chunk_id, chunk_doc_id in enumerate(retrieval.docs_metadata):
|
| 51 |
-
if chunk_doc_id == doc_id:
|
| 52 |
-
scores[chunk_id] = boost_score
|
| 53 |
|
| 54 |
# Получаем индексы чанков
|
| 55 |
chunk_ids = list(range(len(scores)))
|
|
|
|
| 31 |
|
| 32 |
# Выполняем поиск BM25
|
| 33 |
scores = retrieval.bm25_search(query)
|
| 34 |
+
scores = list(scores) # Преобразуем в список если это ndarray
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 35 |
|
| 36 |
# Получаем индексы чанков
|
| 37 |
chunk_ids = list(range(len(scores)))
|