ניסיון חזרה לרשימת הזמרים הרגילה, קובץ באט אוטומטי

עקב ירידת ביצועים, בדיקה עם רשימת הזמרים המלאה (ללא סינון כפולים) נוסף קובץ באט עבור כל תהליך בניית הדאטה באופן אוטומטי
NHLOCAL · Sep 4, 2024 · 4828c09 · 4828c09
1 parent e69836e
commit 4828c09
Show file tree

Hide file tree

Showing 10 changed files with 95,596 additions and 89,710 deletions.
diff --git a/machine-learn/model_metrics.csv b/machine-learn/model_metrics.csv
@@ -4,5 +4,6 @@ custom_ner_model23-4git,0.896142,0.967949,0.834254
 custom_ner_model23-1git,0.895522,0.974026,0.828729
 custom_ner_model24git,0.895126,0.961905,0.837017
 custom_ner_model25-1git,0.893175,0.964744,0.831492
+custom_ner_model26-2git,0.885587,0.958199,0.823204
 custom_ner_model26git,0.876672,0.948553,0.814917
 custom_ner_model26-1git,0.873700,0.945338,0.812155
diff --git a/machine-learn/model_name.txt b/machine-learn/model_name.txt
@@ -1 +1 @@
-custom_ner_model26-2git
+custom_ner_model26-3git
diff --git a/machine-learn/scrape_data/build_data.bat b/machine-learn/scrape_data/build_data.bat
@@ -0,0 +1,37 @@
+@echo off
+
+echo.
+echo #1 - duplic singers removing
+
+cd level1
+
+"1-remove-duplic-singers.py"
+
+echo.
+echo #2 song list processing
+
+"2-song-list-processor.py"
+
+echo.
+echo #3 - singers randoming
+
+"3-randomer_singers.py"
+
+echo.
+echo #4 - creat json
+
+cd..
+
+"1-creat_json.py"
+
+echo.
+echo #5 - cleaner json
+
+"2-cleaner_json.py"
+
+echo.
+echo #6 - pull to git
+
+rem git pull
+
+pause