Vibe coding

.dockerignore

@@ -0,0 +1,75 @@
+# Git
+.git
+.gitignore
+
+# Documentation
+*.md
+README.md
+DIALOGFLOW_EMULATOR.md
+
+# IDE files
+.vs/
+.vscode/
+.idea/
+*.suo
+*.user
+*.userprefs
+*.sln.docstates
+
+# Build artifacts
+bin/
+obj/
+out/
+target/
+
+# Node modules (except in dialogflow-emulator)
+node_modules/
+!dialogflow-emulator/node_modules/
+
+# Logs
+*.log
+logs/
+
+# Temporary files
+tmp/
+temp/
+.tmp/
+
+# OS generated files
+.DS_Store
+.DS_Store?
+._*
+.Spotlight-V100
+.Trashes
+ehthumbs.db
+Thumbs.db
+
+# Application specific
+appsettings.*.json
+!appsettings.json
+!appsettings.Local.json
+
+# Test results
+TestResults/
+[Tt]est[Rr]esults*/
+
+# Build results
+[Dd]ebug/
+[Dd]ebugPublic/
+[Rr]elease/
+[Rr]eleases/
+x64/
+x86/
+[Ww][Ii][Nn]32/
+[Aa][Rr][Mm]/
+[Aa][Rr][Mm]64/
+bld/
+[Bb]in/
+[Oo]bj/
+[Ll]og/
+[Ll]ogs/
+
+# NuGet
+*.nupkg
+*.snupkg
+.nuget/

.github/workflows/build&test.yml

@@ -12,10 +12,73 @@ jobs:
     runs-on: ubuntu-latest
 
     steps:
-    - uses: actions/checkout@v2
+    - uses: actions/checkout@v5
+
     - name: Setup .NET
-      uses: actions/setup-dotnet@v1
+      uses: actions/setup-dotnet@v5
       with:
-        dotnet-version: 6.0.x
+        dotnet-version: 9.0.x
+
     - name: Build and test
-      run: dotnet test --verbosity normal src/FillInTheTextBot.sln
+      run: dotnet test --verbosity normal FillInTheTextBot.slnx
+
+    - name: Publish
+      run: dotnet publish --configuration Release --output ./output src/FillInTheTextBot.Api/FillInTheTextBot.Api.csproj
+
+    - name: Build image
+      uses: docker/build-push-action@v6.18.0
+      with:
+        tags: granstel/fillinthetextbot:latest
+        load: true
+        push: false
+        context: .
+        file: src/FillInTheTextBot.Api/Dockerfile
+
+    - name: Compose
+      uses: hoverkraft-tech/compose-action@3846bcd61da338e9eaaf83e7ed0234a12b099b72
+      with:
+        compose-file: docker-compose.ci.yml
+        up-flags: --build
+
+    - name: Collect per-service logs
+      if: always()
+      run: |
+        mkdir -p compose-logs
+        for s in $(docker compose -f docker-compose.ci.yml config --services); do
+          echo "Collecting logs for $s"
+          docker compose -f docker-compose.ci.yml logs --no-color -t "$s" > "compose-logs/${s}.log" || true
+        done
+
+    - name: Upload per-service logs folder
+      if: failure()
+      uses: actions/upload-artifact@v4.6.2
+      with:
+        name: compose-logs
+        path: compose-logs
+        retention-days: 7
+
+    - name: Collect docker-compose.log
+      if: always()
+      run: docker compose -f docker-compose.ci.yml logs -t >> docker-compose.log || true
+    - name: Upload docker-compose.log
+      if: always()
+      uses: actions/upload-artifact@v4.6.2
+      with:
+        name: docker-compose.log
+        path: docker-compose.log
+        retention-days: 7
+
+    - name: Login to Docker Hub
+      if: ${{ github.ref == 'refs/heads/main' }}
+      uses: docker/login-action@v2
+      with:
+        username: ${{ secrets.DOCKERHUB_USERNAME }}
+        password: ${{ secrets.DOCKERHUB_TOKEN }}
+
+    - name: Push to hub
+      if: ${{ github.ref == 'refs/heads/main' }}
+      uses: docker/build-push-action@v6.18.0
+      with:
+        context: .
+        tags: granstel/fillinthetextbot:latest
+        push: true

.gitignore

@@ -11,7 +11,6 @@
 **/Keys/
 **/deploy/
 **/.config/
-**/Properties/
 /src/FillInTheTextBot.Api/FillInTheTextBot.Api.csproj.user
 /src/FillInTheTextBot.Api/fillinthetextbot-test-bctxpk-bb6ea1e87cd1.json
 /src/FillInTheTextBot.Api/fillinthetextbot-vyyaxp-c062f43624f6.json

FillInTheTextBot.slnx

@@ -0,0 +1,20 @@
+<Solution>
+  <Folder Name="/Messengers/">
+    <Project Path="src\FillInTheTextBot.Messengers.Marusia\FillInTheTextBot.Messengers.Marusia.csproj" />
+    <Project Path="src\FillInTheTextBot.Messengers.Sber\FillInTheTextBot.Messengers.Sber.csproj" />
+    <Project Path="src\FillInTheTextBot.Messengers.Yandex\FillInTheTextBot.Messengers.Yandex.csproj" />
+    <Project Path="src\FillInTheTextBot.Messengers\FillInTheTextBot.Messengers.csproj" />
+  </Folder>
+  <Folder Name="/Tests/">
+    <Project Path="src/FillInTheTextBot.Api.IntegrationTests/FillInTheTextBot.Api.IntegrationTests.csproj" />
+    <Project Path="src\Dialogflow.Emulator.IntegrationTests\Dialogflow.Emulator.IntegrationTests.csproj" />
+    <Project Path="src\FillInTheTextBot.Messengers.Tests\FillInTheTextBot.Messengers.Tests.csproj" />
+    <Project Path="src\FillInTheTextBot.Messengers.Yandex.Tests\FillInTheTextBot.Messengers.Yandex.Tests.csproj" />
+    <Project Path="src\FillInTheTextBot.Services.Tests\FillInTheTextBot.Services.Tests.csproj" />
+  </Folder>
+  <Project Path="src\Dialogflow.Emulator.Client\Dialogflow.Emulator.Client.csproj" Type="C#" />
+  <Project Path="src\Dialogflow.Emulator\Dialogflow.Emulator.csproj" Type="C#" />
+  <Project Path="src\FillInTheTextBot.Api\FillInTheTextBot.Api.csproj" />
+  <Project Path="src\FillInTheTextBot.Models\FillInTheTextBot.Models.csproj" />
+  <Project Path="src\FillInTheTextBot.Services\FillInTheTextBot.Services.csproj" />
+</Solution>

MEMORY_LEAK_FIXES.md

@@ -0,0 +1,79 @@
+# Исправления утечек памяти в FillInTheTextBot
+
+## Обнаруженные и исправленные проблемы:
+
+### 1. **Tracing.cs - Утечка ActivitySource**
+**Проблема**: Статический `ActivitySource` создавался, но никогда не освобождался.
+**Исправление**: Добавили обработчики событий `AppDomain.CurrentDomain.ProcessExit` и `AppDomain.CurrentDomain.DomainUnload` для вызова `Dispose()`.
+
+### 2. **MetricsCollector.cs - Утечка Meter**
+**Проблема**: Статический `Meter` создавался, но никогда не освобождался.
+**Исправление**: Сохраняем ссылку на `Meter` и добавили обработчики событий завершения приложения для его освобождения.
+
+### 3. **ExternalServicesRegistration.cs - Утечка ConnectionMultiplexer**
+**Проблема**: `ConnectionMultiplexer` создавался каждый раз при вызове `RegisterRedisClient`, что могло приводить к множественным подключениям к Redis.
+**Исправление**: Изменили архитектуру - теперь `ConnectionMultiplexer` регистрируется как Singleton отдельно, а `IDatabase` получается из него.
+
+### 4. **gRPC клиенты - Потенциальные утечки и неэффективность**
+**Проблема**: `SessionsClient` и `ContextsClient` могли создаваться повторно для каждого запроса, не переиспользовались.
+**Исправление**: Создали `GrpcClientManager` который:
+- Кэширует клиенты по ScopeId
+- Реализует IDisposable для правильного освобождения ресурсов
+- Пытается вызвать Dispose/DisposeAsync на клиентах при завершении
+
+### 5. **TasksExtensions.cs - Проблемы с Task.Factory.StartNew**
+**Проблема**: Использование `Task.Factory.StartNew` вместо `Task.Run` может приводить к проблемам с управлением памятью.
+**Исправление**: Заменили на `Task.Run` который лучше управляет thread pool и ресурсами.
+
+### 6. **Startup.cs - ActivityListener не освобождался**
+**Проблема**: `ActivityListener` создавался, но не освобождался при завершении приложения.
+**Исправление**: Добавили освобождение в `ApplicationStopping` event.
+
+## Добавленные инструменты диагностики:
+
+### 1. **MemoryDiagnostics.cs**
+- Класс для мониторинга использования памяти
+- Логирование текущего использования памяти
+- Принудительная сборка мусора с логированием
+- Периодический мониторинг памяти
+
+### 2. **MemoryMonitoringMiddleware.cs**
+- Middleware для отслеживания памяти на каждый HTTP запрос
+- Логирует использование памяти до и после обработки запроса
+
+### 3. **GrpcClientManager.cs**
+- Менеджер для управления жизненным циклом gRPC клиентов
+- Кэширование клиентов
+- Правильное освобождение ресурсов
+
+## Интеграция в приложение:
+
+1. **Инициализация диагностики** в `Startup.cs`:
+   - Инициализация `MemoryDiagnostics`
+   - Периодический мониторинг памяти (каждые 5 минут)
+
+2. **Middleware pipeline**:
+   - Добавлен `MemoryMonitoringMiddleware` после `ExceptionsMiddleware`
+
+3. **DI контейнер**:
+   - `GrpcClientManager` зарегистрирован как Singleton
+   - `ConnectionMultiplexer` правильно зарегистрирован
+
+## Рекомендации по мониторингу:
+
+1. **Логи памяти**: Следите за логами с префиксом "Memory usage" и "Memory diagnostics"
+
+2. **Метрики**: Используйте существующую Prometheus интеграцию для мониторинга:
+   - Количество сборок мусора (Gen0, Gen1, Gen2)
+   - Использование памяти приложением
+
+3. **Периодическая диагностика**: Логи будут показывать использование памяти каждые 5 минут
+
+4. **При высокой нагрузке**: Активируйте логирование памяти для каждого запроса (уже включено)
+
+## Потенциальные дополнительные улучшения:
+
+1. **WeakReference** для кэшей, которые могут расти
+2. **IMemoryCache** с TTL для временных данных
+3. **Профилирование** с помощью dotMemory или PerfView
+4. **Monitoring**: Настроить алерты в Prometheus/Grafana для роста памяти

docker-compose.ci.yml

@@ -0,0 +1,33 @@
+services:
+  dialogflow-emulator:
+    build:
+      context: .
+      dockerfile: src/Dialogflow.Emulator/Dockerfile
+    volumes:
+      - ./Dialogflow/FillInTheTextBot-test-eu:/app/agent:ro
+    environment:
+      - AGENT_PATH=/app/agent
+      - Kestrel__Endpoints__Grpc__Url=http://0.0.0.0:8195
+    read_only: true
+    security_opt:
+      - no-new-privileges:true
+
+  redis:
+    image: redis:alpine
+    container_name: fillinthetextbot-redis
+    ports:
+      - "6379"
+
+  FillInTheTextBot:
+    image: granstel/fillinthetextbot:latest
+    environment:
+      - ASPNETCORE_URLS=http://+:8080
+      - ASPNETCORE_ENVIRONMENT=CI
+    read_only: true
+    security_opt:
+      - no-new-privileges:true
+    depends_on:
+      dialogflow-emulator:
+        condition: service_started
+      redis:
+        condition: service_started

docker-compose.yml

@@ -0,0 +1,21 @@
+services:
+  dialogflow-emulator:
+    build:
+      context: .
+      dockerfile: src/Dialogflow.Emulator/Dockerfile
+    ports:
+      - "7195:7195"
+    volumes:
+      - ./Dialogflow/FillInTheTextBot-test-eu:/app/agent:ro
+    environment:
+      - AGENT_PATH=/app/agent
+      - Kestrel__Endpoints__Grpc__Url=http://0.0.0.0:7195
+    read_only: true
+    security_opt:
+      - no-new-privileges:true
+
+  redis:
+    image: redis:alpine
+    container_name: fillinthetextbot-redis
+    ports:
+      - "6379:6379"