Upload 40 files

.gitattributes

@@ -33,3 +33,18 @@ saved_model/**/* filter=lfs diff=lfs merge=lfs -text
 *.zip filter=lfs diff=lfs merge=lfs -text
 *.zst filter=lfs diff=lfs merge=lfs -text
 *tfevents* filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/023T0569/log(336804727)\[26-03-2024_16-17-03\][[:space:]]01.06-01.07.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/Р3106/log(336044815)\[26-03-2024_13-06-23\][[:space:]]01.08-01.09.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С0790/log(336801558)\[26-03-2024_13-30-07\][[:space:]]01.07-01.08.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С1067/log(336802167)\[25-03-2024_17-01-54\][[:space:]]01.07-01.08.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С1067/log(336802167)\[26-03-2024_09-22-07\][[:space:]]01.06-06.06.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С1067/log(336802167)\[26-03-2024_09-29-02\][[:space:]]06.06-18.06.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С1067/log(336802167)\[26-03-2024_10-29-13\][[:space:]]18.06-30.06.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С1178/log(336801334)\[25-03-2024_16-41-08\][[:space:]]01.09-01.10.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С2177/log(336802953)\[26-03-2024_16-33-14\][[:space:]]01.05-01.06.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С2177/log(336802953)\[26-03-2024_16-47-56\][[:space:]]01.06-01.07.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С2586/log(336801531)\[26-03-2024_10-59-04\][[:space:]]01.07-01.08.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С2586/log(336801531)\[26-03-2024_11-45-54\][[:space:]]01.08-01.09.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/С2627[[:space:]]7226ом61/log(336802983)\[26-03-2024_16-29-06\][[:space:]]01.05-01.06.csv filter=lfs diff=lfs merge=lfs -text
+data/исходные[[:space:]]данные[[:space:]]от[[:space:]]оператора/C1969/log(336802313)\[26-03-2024_15-59-36\][[:space:]]01.06-01.07.csv filter=lfs diff=lfs merge=lfs -text
+forecasting/model.cbm filter=lfs diff=lfs merge=lfs -text

.streamlit/config.toml

@@ -0,0 +1,3 @@
+[server]
+runOnSave = false
+maxUploadSize = 1000

app.py

@@ -0,0 +1,120 @@
+import datetime
+from io import StringIO
+from pathlib import Path
+
+import pandas as pd
+import streamlit as st
+
+from forecasting import prediction_script
+
+MOST_IMPORTANT_CONSTANT = 300
+
+
+def predict_line_chart(dataframe: pd.DataFrame) -> None:
+    datetime_column = [_x for i, _x in enumerate(dataframe['datetime'].to_list())]
+    predict_column = [_y for i, _y in enumerate(dataframe['predict'].to_list())]
+
+    if len(datetime_column) > MOST_IMPORTANT_CONSTANT:
+        datetime_column = [datetime_column[index] for index in
+                           range(0, len(datetime_column), len(datetime_column) // MOST_IMPORTANT_CONSTANT)]
+        predict_column = [predict_column[index] for index in
+                          range(0, len(predict_column), len(predict_column) // MOST_IMPORTANT_CONSTANT)]
+
+    st.line_chart(
+        {
+            'datetime': datetime_column,
+            'predict': predict_column,
+        }, y='predict'
+    )
+
+st.set_page_config(page_title="Streamlit Wide Mode", layout="wide")
+tractor_data_upload__tab, origin_tractor_data__tab = st.tabs(
+    ["Загрузить данные трактора", "Валидация исходных данных тракторов от оператора", ])
+
+with origin_tractor_data__tab:
+    directory_path = Path().joinpath(*['data', 'исходные данные от оператора'])
+
+    files_dict = {file_path.parent.name: file_path.name for file_path in directory_path.rglob("*") if
+                  file_path.is_file()}
+
+    st.header("Система умной телеметрии трактора")
+
+    st.text('Для начала работы выберите трактор')
+
+    SELECT_TRACTOR_IDENTIFIER_SUGGEST = 'Выберите идентификатор'
+    SELECT_TRACTOR_DETAIL_SUGGEST = "Выберите деталь"
+
+    selected_tractor_id = st.selectbox("Выберите идентификатор трактора",
+                                       [SELECT_TRACTOR_IDENTIFIER_SUGGEST]
+                                       + [f'{tractor_id}' for tractor_id in files_dict.keys()])
+    if selected_tractor_id != SELECT_TRACTOR_IDENTIFIER_SUGGEST:
+        if selected_tractor_id in files_dict:
+            st.success(f"Выбранный трактор: {selected_tractor_id}")
+
+            files = directory_path.joinpath(selected_tractor_id).rglob("*")
+            dataframes = [pd.read_csv(file, delimiter=';') for file in files]
+            dataframe = pd.concat(dataframes)
+            dataframe = prediction_script.predict(dataframe)
+            predict_line_chart(dataframe)
+
+            predict_column = [_y for i, _y in enumerate(dataframe['predict'].to_list())]
+
+            if sum(predict_column) / len(predict_column) > 1.5:
+                st.error('Трактор сейчас определённо имеет проблемы')
+
+                detail_id = st.selectbox("Выберите деталь для замены", [
+                    SELECT_TRACTOR_DETAIL_SUGGEST,
+                    "ДВС",
+                    "КПП",
+                    "Гидравлика",
+                    "Питание двигателя",
+                    "Электросистема",
+                    "Стояночный тормоз",
+                    "Охлаждение",
+                    "Термостат",
+                ])
+
+                if detail_id != SELECT_TRACTOR_DETAIL_SUGGEST:
+                    if detail_id:
+                        st.success(f"{detail_id} заказана.\n"
+                                   f"Ждите")
+            else:
+                st.success(f"Выбранный трактор сейчас в нормальном состоянии")
+
+        else:
+            st.error("Идентификатор не найдет. ")
+with tractor_data_upload__tab:
+    uploaded_file = st.file_uploader("Choose a file", )
+    if uploaded_file is not None:
+        bytes_data = uploaded_file.getvalue()
+
+        stringio = StringIO(uploaded_file.getvalue().decode("utf-8"))
+        dataframe = pd.read_csv(uploaded_file, delimiter=';')
+
+        dataframe = prediction_script.predict(dataframe)
+
+        predict_line_chart(dataframe)
+
+        predict_column = [_y for i, _y in enumerate(dataframe['predict'].to_list())]
+
+        if sum(predict_column) / len(predict_column) > 1.5:
+            st.error('Трактор сейчас определённо имеет проблемы')
+
+            detail_id = st.selectbox("Выберите деталь для замены", [
+                SELECT_TRACTOR_DETAIL_SUGGEST,
+                "ДВС",
+                "КПП",
+                "Гидравлика",
+                "Питание двигателя",
+                "Электросистема",
+                "Стояночный тормоз",
+                "Охлаждение",
+                "Термостат",
+            ])
+
+            if detail_id != SELECT_TRACTOR_DETAIL_SUGGEST:
+                if detail_id:
+                    st.success(f"{detail_id} заказана.\n"
+                               f"Ждите")
+        else:
+            st.success(f"Выбранный трактор сейчас в нормальном состоянии")

data/исходные данные от оператора/023T0569/log(336804727)[26-03-2024_16-17-03] 01.06-01.07.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:a15f589e57587d952603ebac39d911644e98c3d036c57c148f068ce9d7aee5f0
+size 10486177

data/исходные данные от оператора/C1969/log(336802313)[26-03-2024_15-59-36] 01.06-01.07.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:1eb1810fcc53cebba01b7d73918a0be2e8b042ae29f1fdb0428ba263ce08be87
+size 31401385

data/исходные данные от оператора/Р3106/log(336044815)[26-03-2024_13-06-23] 01.08-01.09.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:c92ca39be6165457ffb198286c6100ab3bd91b5cf88ece7a5211d50831ae27c4
+size 15450403

data/исходные данные от оператора/С0790/log(336801558)[26-03-2024_13-30-07] 01.07-01.08.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:f2671c530e89ac7962bcbe6ff2d402fa6043fe1b4ead55926bdff65eb4956082
+size 49849217

data/исходные данные от оператора/С1067/log(336802167)[25-03-2024_17-01-54] 01.07-01.08.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:229d3d52af9cd9b97b10603173b7f77ad2424f59ac40a3504ae096cf3819e9ac
+size 48275328

data/исходные данные от оператора/С1067/log(336802167)[26-03-2024_09-22-07] 01.06-06.06.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:42a14d6540abaf9032d6bb8a66c9d7b3806cf2840181907e0ffd928075b9a817
+size 14988548

data/исходные данные от оператора/С1067/log(336802167)[26-03-2024_09-29-02] 06.06-18.06.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:981e48a0f93f88a475dc68ffa29820384af547afce8ff0eb74efffa9ee22996c
+size 50824644

data/исходные данные от оператора/С1067/log(336802167)[26-03-2024_10-29-13] 18.06-30.06.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:ad3f945987dc403ced3fa032db9bddf741e3de261f52865deff0ac110ff022a6
+size 54165574

data/исходные данные от оператора/С1178/log(336801334)[25-03-2024_16-41-08] 01.09-01.10.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:c7e8fb62b2fd278a99d8021dd3e1741b87e410bd062975fa53d985accb576f58
+size 24615603

data/исходные данные от оператора/С2177/log(336802953)[26-03-2024_16-33-14] 01.05-01.06.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:fd4f4ff2312acb16a4bff3ea8889d442cf3a4c8aed0a66c903a1b07e55e0977c
+size 24505901

data/исходные данные от оператора/С2177/log(336802953)[26-03-2024_16-47-56] 01.06-01.07.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:8a7a67dbe2ba875b8dfbf21804c4152bb51cf50383c825ac8bc2cef80755e354
+size 22347280

data/исходные данные от оператора/С2586/log(336801531)[26-03-2024_10-59-04] 01.07-01.08.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:1d99b37818479900f00335c29237cb76477daff82091d5e980a6e054edb21001
+size 51963905

data/исходные данные от оператора/С2586/log(336801531)[26-03-2024_11-45-54] 01.08-01.09.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:e76f94bfb84e1355bf80f6081d40ca60631134ede0acaa1dc4e5ef415f30ab08
+size 91456950

data/исходные данные от оператора/С2627 7226ом61/log(336802983)[26-03-2024_16-29-06] 01.05-01.06.csv

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:3930e47b6283b102e2992f657f71a83cbdc75e3a5992a0cacac9820dc5ed0afd
+size 13333833

forecasting/README.md

@@ -0,0 +1,6 @@
+Данная папка должна содержать:  
+
+- код обучения модели прогнозирования;    
+- сохраненный файл с весами обученной модели прогнозирования;
+- описание проделанной работы, обоснование выбора модели, анализ производительности и качества предложенного решения, логика работы модели и другие комментарии от разработчиков;
+- `.ipynb`-ноутбук, демонстрирующий запуск модели на тестовых данных с кодом выгрузки предсказаний для проверяющей системы. Если данные были изменены перед тем, как обучать модель, приложите файл обработанных данных или проведите изменения непосредственно в ноутбуке. У жюри должна быть возможность склонировать ваш репозиторий и без дополнительных усилий запустить предсказания, получив в результате работы ноутбука файл с ответами для проверки в проверяющей системе.

forecasting/model.cbm

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:8079d39ec7b196aad7fbb5f6bf0314683e16143f0775446da8486557803722d5
+size 104737304

forecasting/prediction_script.py

@@ -0,0 +1,71 @@
+import pandas as pd
+import numpy as np
+from catboost import CatBoostClassifier
+from pathlib import Path
+
+
+# PATH = 'data\исходные данные от оператора\С0873\log(336802058)[25-03-2024_16-31-03] 01.09-01-10.csv'
+def predict(dataframe):
+    dataframe = dataframe.replace(r'^\s*-', np.nan, regex=True)
+
+    dataframe.reset_index(drop=True, inplace=True)
+
+    dataframe.drop_duplicates(inplace=True)
+
+    data_time = dataframe['Дата и время']
+
+    dataframe.drop(columns=['Дата и время', 'iButton2', 'Нагрузка на двигатель, %', 'Крутящий момент (spn513), Нм',
+                            'Положение рейки ТНВД (spn51), %', 'Расход топлива (spn183), л/ч',
+                            'ДВС. Температура наддувочного воздуха, °С',
+                            'Давление наддувочного воздуха двигателя (spn106), кПа', 'Текущая передача (spn523)',
+                            'Температура масла гидравлики (spn5536), С', 'Педаль слива (spn598)'], inplace=True)
+
+    dataframe.drop(['Нейтраль КПП (spn3843)', 'Стояночный тормоз (spn3842)',
+                    'Аварийная температура охлаждающей жидкости (spn3841)', 'Засоренность воздушного фильтра (spn3840)',
+                    'Засоренность фильтра КПП (spn3847)', 'Аварийное давление масла ДВС (spn3846)',
+                    'Засоренность фильтра ДВС (spn3845)',
+                    'Засоренность фильтра рулевого управления (spn3844)',
+                    'Засоренность фильтра навесного оборудования (spn3851)',
+                    'Недопустимый уровень масла в гидробаке (spn3850)',
+                    'Аварийная температура масла в гидросистеме (spn3849)',
+                    'Аварийное давление в I контуре тормозной системы (spn3848)',
+                    'Аварийное давление в II контуре тормозной системы (spn3855)',
+                    'Зарядка АКБ (spn3854)', 'Отопитель (spn3853)',
+                    'Выход блока управления двигателем (spn3852)',
+                    'Включение тормозков (spn3859)', 'Засоренность фильтра слива (spn3858)',
+                    'Аварийное давление масла КПП (spn3857)',
+                    'Аварийная температура масла ДВС(spn3856)',
+                    'Неисправность тормозной системы (spn3863)', 'Термостарт (spn3862)',
+                    'Разрешение запуска двигателя (spn3861)', 'Низкий уровень ОЖ (spn3860)',
+                    'Аварийная температура масла ГТР (spn3867)',
+                    'Необходимость сервисного обслуживания (spn3866)',
+                    'Подогрев топливного фильтра (spn3865)', 'Вода в топливе (spn3864)',
+                    'Холодный старт (spn3871)'], axis=1, inplace=True)
+
+    dataframe = dataframe.astype(str)
+
+    dataframe["Сост.пед.сцепл."] = dataframe["Сост.пед.сцепл."].astype(bool)
+
+    dataframe['Обор.двиг.,об/мин'] = dataframe['Обор.двиг.,об/мин'].str.replace(',', '.').astype(float)
+
+    dataframe['Значение счетчика моточасов, час:мин'] = dataframe['Значение счетчика моточасов, час:мин'].str.replace(
+        ':', '').astype(float)
+
+    dataframe['Сост.пед.сцепл.'] = dataframe['Сост.пед.сцепл.'].replace(',', '.').astype(float)
+    dataframe['Сост.пед.сцепл.'] = dataframe['Сост.пед.сцепл.'].astype(str)
+
+    dataframe['Полож.пед.акселер.,%'] = dataframe['Полож.пед.акселер.,%'].str.replace(',', '.').astype(float)
+
+    dataframe['Темп.масла двиг.,°С'] = dataframe['Темп.масла двиг.,°С'].str.replace(',', '.').astype(float)
+
+    dataframe['КПП. Температура масла'] = dataframe['КПП. Температура масла'].astype(float)
+
+    model = CatBoostClassifier()
+
+    model.load_model(Path().joinpath(*['forecasting', 'model.cbm']))
+
+    dataframe['predict'] = model.predict(dataframe)
+
+    dataframe['datetime'] = data_time
+
+    return dataframe

reqiurments.txt

@@ -0,0 +1,5 @@
+streamlit
+pandas
+numpy
+
+catboost