Deal — единая кодовая база
ci / build-test (push) Canceled after 0s

SaaS-мониторинг Telegram: ядро (модули Cards/Kanban/Pipeline/Tenants/Settings/
Discovery, Api, Infrastructure), сервисы telegram/ai/ml/storage, фронт Vue,
контракты и grpc-hosting, деплой-конфиги (dev/prod/observability/CI-раннер),
Gitea Actions CI, документация (ТЗ, техдок, api-map, код-стайл, планы, бэклог).

Текущее состояние: все этапы роадмапа 0–12 закрыты, сборка 5 sln 0/0,
тесты 1340/130/52/38/9 зелёные.
This commit is contained in:
Rustam Khalimov
2026-09-11 23:56:47 +03:00
commit 27c7831910
1383 changed files with 158436 additions and 0 deletions
+10
View File
@@ -0,0 +1,10 @@
# Дейл (Deal) — исходники
- `core/` — модульный монолит .NET (бизнес-логика, API)
- `ml-service/` — ML (.NET + ONNX), отдельный процесс
- `ai-service/` — LLM-фасад, отдельный процесс
- `telegram-service/` — ферма сессий Telegram, отдельный процесс
- `contracts/` — общие .proto (gRPC)
- `frontend/` — Vue (переехал из LeadRadar как есть)
Подробности: `docs/architecture/2026-09-05-deal-architecture-design.md`
@@ -0,0 +1,576 @@
using System.Text.Json.Nodes;
using Deal.Ai.Llm;
using Deal.Grpc.Ai;
using Grpc.Core;
using Microsoft.Extensions.DependencyInjection;
namespace Deal.Ai.Tests.Ai;
/// <summary>
/// In-proc gRPC-тесты AiService поверх фейк-провайдера
/// </summary>
public sealed class AiRpcTests
{
// Имя провайдера сценариев (для текста ошибки UNAVAILABLE).
private const string ProviderId = "deepseek";
// Usage API-ответа сценариев (проверка проброса в reply).
private static readonly ProviderUsage SampleUsage = new(11, 5, 16);
private const string UnavailableDetail =
"ИИ (DeepSeek) не ответил корректно — повторите попытку через несколько секунд";
/// <summary>
/// Filter: модель пропускает сообщение — pass=true с причиной и usage API-ответа.
/// </summary>
[Fact]
public async Task Filter_ModelPasses_ReturnsPassReasonAndUsage()
{
FakeProviderClient fake = Success("""{"pass": true, "reason": "похоже на заявку"}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
FilterReply reply = await client.FilterAsync(
new FilterRequest
{
Prompt = "Фильтр: {domain}",
Text = "Ищем разработчика на проект",
ProviderConfig = RequestConfig(),
},
Options());
Assert.True(reply.Pass);
Assert.Equal("похоже на заявку", reply.Reason);
AssertUsage(reply.Usage, SampleUsage);
FakeProviderCall call = Assert.Single(fake.Calls);
Assert.Equal("Фильтр: {domain}", call.SystemPrompt);
Assert.Equal("Сообщение:\nИщем разработчика на проект", call.UserText);
});
}
/// <summary>
/// Filter: модель отклоняет сообщение — pass=false с причиной отказа.
/// </summary>
[Fact]
public async Task Filter_ModelRejects_ReturnsPassFalse()
{
FakeProviderClient fake = Success("""{"pass": false, "reason": "реклама канала"}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
FilterReply reply = await client.FilterAsync(
new FilterRequest { Prompt = "Фильтр", Text = "Подпишись на канал", ProviderConfig = RequestConfig() },
Options());
Assert.False(reply.Pass);
Assert.Equal("реклама канала", reply.Reason);
});
}
/// <summary>
/// Filter: модель не вернула pass — по умолчанию пропуск
/// </summary>
[Fact]
public async Task Filter_MissingPassField_DefaultsToPass()
{
FakeProviderClient fake = Success("""{"note": "ничего не понял"}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
FilterReply reply = await client.FilterAsync(
new FilterRequest { Prompt = "Фильтр", Text = "Текст", ProviderConfig = RequestConfig() },
Options());
Assert.True(reply.Pass);
Assert.False(reply.HasReason);
});
}
/// <summary>
/// Filter: провайдер недоступен после ретраев
/// </summary>
[Fact]
public async Task Filter_ProviderUnavailable_ThrowsUnavailableWithDetail()
{
FakeProviderClient fake = Failing();
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
RpcException exception = await Assert.ThrowsAsync<RpcException>(() =>
client.FilterAsync(
new FilterRequest { Prompt = "Фильтр", Text = "Текст", ProviderConfig = RequestConfig() },
Options()).ResponseAsync);
Assert.Equal(StatusCode.Unavailable, exception.StatusCode);
Assert.Equal(UnavailableDetail, exception.Status.Detail);
Assert.Equal(LlmRetryPolicy.AttemptCount, fake.Calls.Count);
});
}
/// <summary>
/// Filter: ответ модели без JSON после ретраев — тоже UNAVAILABLE
/// </summary>
[Fact]
public async Task Filter_AnswerWithoutJson_ThrowsUnavailable()
{
FakeProviderClient fake = new((_, _, _) =>
Task.FromResult(new ProviderChatResult("какой-то текст без json", Usage: null)));
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
RpcException exception = await Assert.ThrowsAsync<RpcException>(() =>
client.FilterAsync(
new FilterRequest { Prompt = "Фильтр", Text = "Текст", ProviderConfig = RequestConfig() },
Options()).ResponseAsync);
Assert.Equal(StatusCode.Unavailable, exception.StatusCode);
});
}
/// <summary>
/// Classify: модель вернула JSON — ok=true, json = извлечённый ответ строкой
/// </summary>
[Fact]
public async Task Classify_ModelAnsweredJson_ReturnsOkAndJson()
{
const string modelJson =
"""{"board": "dev", "title": "Нужен python-разработчик", "budget": null, "contacts": []}""";
FakeProviderClient fake = Success(modelJson);
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
ClassifyReply reply = await client.ClassifyAsync(
new ClassifyRequest
{
SystemPrompt = "Система карточки",
UserContext = "Доски:\n- dev: разработка\nНовое сообщение: ищем middle",
ProviderConfig = RequestConfig(),
},
Options());
Assert.True(reply.Ok);
Assert.True(reply.HasJson);
AssertUsage(reply.Usage, SampleUsage);
JsonObject json = JsonNode.Parse(reply.Json)!.AsObject();
Assert.Equal("dev", (string?)json["board"]);
Assert.Equal("Нужен python-разработчик", (string?)json["title"]);
FakeProviderCall call = Assert.Single(fake.Calls);
Assert.Equal("Система карточки", call.SystemPrompt);
Assert.Equal("Доски:\n- dev: разработка\nНовое сообщение: ищем middle", call.UserText);
});
}
/// <summary>
/// Classify: модель отвечала, но без разбираемого JSON после ретраев → ok=false, НЕ RPC-ошибка; usage последней попытки в ответе
/// </summary>
[Fact]
public async Task Classify_AnswerWithoutJson_ReturnsOkFalseWithUsage()
{
const string systemPrompt = "Система карточки";
const string userContext = "Доски и сообщение для разбора";
const string garbage = "простите, я не умею в json";
FakeProviderClient fake = new((_, _, _) =>
Task.FromResult(new ProviderChatResult(garbage, Usage: null)));
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
ClassifyReply reply = await client.ClassifyAsync(
new ClassifyRequest
{
SystemPrompt = systemPrompt,
UserContext = userContext,
ProviderConfig = RequestConfig(),
},
Options());
Assert.False(reply.Ok);
Assert.False(reply.HasJson);
Assert.Equal(EstimateTokens(systemPrompt.Length + userContext.Length), reply.Usage.Prompt);
Assert.Equal(EstimateTokens(garbage.Length), reply.Usage.Completion);
Assert.Equal(LlmRetryPolicy.AttemptCount, fake.Calls.Count);
});
}
/// <summary>
/// Classify: провайдер недоступен — UNAVAILABLE
/// </summary>
[Fact]
public async Task Classify_ProviderUnavailable_ThrowsUnavailable()
{
FakeProviderClient fake = Failing();
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
RpcException exception = await Assert.ThrowsAsync<RpcException>(() =>
client.ClassifyAsync(
new ClassifyRequest { SystemPrompt = "S", UserContext = "U", ProviderConfig = RequestConfig() },
Options()).ResponseAsync);
Assert.Equal(StatusCode.Unavailable, exception.StatusCode);
Assert.Equal(UnavailableDetail, exception.Status.Detail);
});
}
/// <summary>
/// GenerateKeywords
/// </summary>
[Fact]
public async Task GenerateKeywords_ModelReturnedKeywords_ReturnsList()
{
FakeProviderClient fake = Success("""{"keywords": ["стройка", "ремонт квартир", "подряды"]}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
GenerateKeywordsReply reply = await client.GenerateKeywordsAsync(
new GenerateKeywordsRequest
{
Description = "Поиск каналов со стройкой и ремонтом",
ProviderConfig = RequestConfig(),
},
Options());
Assert.Equal(["стройка", "ремонт квартир", "подряды"], reply.Keywords);
AssertUsage(reply.Usage, SampleUsage);
FakeProviderCall call = Assert.Single(fake.Calls);
Assert.Contains("эксперт по поиску Telegram-каналов", call.SystemPrompt, StringComparison.Ordinal);
Assert.Contains("Верни строго JSON", call.SystemPrompt, StringComparison.Ordinal);
Assert.Equal("Описание ниши/задачи:\nПоиск каналов со стройкой и ремонтом", call.UserText);
});
}
/// <summary>
/// GenerateKeywords
/// </summary>
[Fact]
public async Task GenerateKeywords_NonStringItems_Skipped()
{
FakeProviderClient fake = Success("""{"keywords": ["php", 42, "c#"]}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
GenerateKeywordsReply reply = await client.GenerateKeywordsAsync(
new GenerateKeywordsRequest { Description = "Разработка", ProviderConfig = RequestConfig() },
Options());
Assert.Equal(["php", "c#"], reply.Keywords);
});
}
/// <summary>
/// GenerateKeywords
/// </summary>
[Fact]
public async Task GenerateKeywords_NoKeywordsField_ReturnsEmpty()
{
FakeProviderClient fake = Success("""{"note": "не нашёл ключей"}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
GenerateKeywordsReply reply = await client.GenerateKeywordsAsync(
new GenerateKeywordsRequest { Description = "Разработка", ProviderConfig = RequestConfig() },
Options());
Assert.Empty(reply.Keywords);
});
}
/// <summary>
/// EvaluateFit: fit=1 + причина; промпт собран сервисом из описания и ключей, сообщение — как «Сообщение:\n…».
/// </summary>
[Fact]
public async Task EvaluateFit_ModelFits_ReturnsFitAndReason()
{
FakeProviderClient fake = Success("""{"fit": 1, "reason": "строительная тематика"}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
EvaluateFitReply reply = await client.EvaluateFitAsync(
new EvaluateFitRequest
{
Text = "Нужна бригада отделочников на объект",
Description = "Поиск подрядчиков на отделку",
ProviderConfig = RequestConfig(),
},
Options());
Assert.True(reply.Fit);
Assert.Equal("строительная тематика", reply.Reason);
AssertUsage(reply.Usage, SampleUsage);
FakeProviderCall call = Assert.Single(fake.Calls);
Assert.Equal("Сообщение:\nНужна бригада отделочников на объект", call.UserText);
Assert.Contains("Оцени, относится ли сообщение к сфере/задаче", call.SystemPrompt, StringComparison.Ordinal);
Assert.Contains("Описание: Поиск подрядчиков на отделку.", call.SystemPrompt, StringComparison.Ordinal);
});
}
/// <summary>
/// EvaluateFit: ключи задачи подставляются в промпт строкой через запятую.
/// </summary>
[Fact]
public async Task EvaluateFit_KeywordsJoinedIntoPrompt()
{
FakeProviderClient fake = Success("""{"fit": 0, "reason": "не совпадает"}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
await client.EvaluateFitAsync(
new EvaluateFitRequest
{
Text = "Текст",
Description = "Описание",
Keywords = { "стройка", " ремонт ", " ", "подряд" },
ProviderConfig = RequestConfig(),
},
Options());
string systemPrompt = Assert.Single(fake.Calls).SystemPrompt;
Assert.Contains("Ключи: стройка, ремонт, подряд.", systemPrompt, StringComparison.Ordinal);
});
}
/// <summary>
/// EvaluateFit: fit=0 без причины модели — причина по умолчанию «не подходит»; строковое «нет» трактуется как ложь.
/// </summary>
[Fact]
public async Task EvaluateFit_ModelNoFit_ReturnsDefaultReason()
{
FakeProviderClient fake = Success("""{"fit": 0}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
EvaluateFitReply reply = await client.EvaluateFitAsync(
new EvaluateFitRequest { Text = "Текст", Description = "Описание", ProviderConfig = RequestConfig() },
Options());
Assert.False(reply.Fit);
Assert.Equal("не подходит", reply.Reason);
});
}
/// <summary>
/// EvaluateFit: fit строкой «нет» — false, причина из модели.
/// </summary>
[Fact]
public async Task EvaluateFit_StringFalsyFit_ReturnsFalse()
{
FakeProviderClient fake = Success("""{"fit": "нет", "reason": "другая сфера"}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
EvaluateFitReply reply = await client.EvaluateFitAsync(
new EvaluateFitRequest { Text = "Текст", Description = "Описание", ProviderConfig = RequestConfig() },
Options());
Assert.False(reply.Fit);
Assert.Equal("другая сфера", reply.Reason);
});
}
/// <summary>
/// EvaluateFit: длинная причина модели усекается до 200 символов.
/// </summary>
[Fact]
public async Task EvaluateFit_LongReason_IsTruncatedTo200()
{
string longReason = new('а', 250);
FakeProviderClient fake = Success($$"""{"fit": 1, "reason": "{{longReason}}"}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
EvaluateFitReply reply = await client.EvaluateFitAsync(
new EvaluateFitRequest { Text = "Текст", Description = "Описание", ProviderConfig = RequestConfig() },
Options());
Assert.Equal(200, reply.Reason.Length);
Assert.StartsWith("ааааа", reply.Reason, StringComparison.Ordinal);
});
}
/// <summary>
/// Конфиг-валидация
/// </summary>
[Fact]
public async Task Classify_WithoutProviderConfig_IsInvalidArgument()
{
FakeProviderClient fake = Success("{}");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
RpcException exception = await Assert.ThrowsAsync<RpcException>(() =>
client.ClassifyAsync(
new ClassifyRequest { SystemPrompt = "S", UserContext = "U" },
Options()).ResponseAsync);
Assert.Equal(StatusCode.InvalidArgument, exception.StatusCode);
Assert.Empty(fake.Calls);
});
}
/// <summary>
/// Конфиг-валидация
/// </summary>
[Fact]
public async Task GenerateKeywords_EmptyModel_IsInvalidArgument()
{
FakeProviderClient fake = Success("{}");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
RpcException exception = await Assert.ThrowsAsync<RpcException>(() =>
client.GenerateKeywordsAsync(
new GenerateKeywordsRequest
{
Description = "Описание",
ProviderConfig = new ProviderConfig { BaseUrl = "https://api.example.com/v1" },
},
Options()).ResponseAsync);
Assert.Equal(StatusCode.InvalidArgument, exception.StatusCode);
Assert.Empty(fake.Calls);
});
}
/// <summary>
/// Серверный лимит text
/// </summary>
[Fact]
public async Task Filter_TooLongText_IsInvalidArgument()
{
FakeProviderClient fake = Success("""{"pass": true}""");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
RpcException exception = await Assert.ThrowsAsync<RpcException>(() =>
client.FilterAsync(
new FilterRequest
{
Prompt = "Фильтр",
Text = new string('а', 4001),
ProviderConfig = RequestConfig(),
},
Options()).ResponseAsync);
Assert.Equal(StatusCode.InvalidArgument, exception.StatusCode);
Assert.Empty(fake.Calls);
});
}
/// <summary>
/// Серверный лимит description
/// </summary>
[Fact]
public async Task GenerateKeywords_TooLongDescription_IsInvalidArgument()
{
FakeProviderClient fake = Success("{}");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
RpcException exception = await Assert.ThrowsAsync<RpcException>(() =>
client.GenerateKeywordsAsync(
new GenerateKeywordsRequest
{
Description = new string('а', 4001),
ProviderConfig = RequestConfig(),
},
Options()).ResponseAsync);
Assert.Equal(StatusCode.InvalidArgument, exception.StatusCode);
Assert.Empty(fake.Calls);
});
}
/// <summary>
/// Обязательный tenant-id в metadata
/// </summary>
[Fact]
public async Task Classify_WithoutTenantId_IsUnauthenticated()
{
FakeProviderClient fake = Success("{}");
await AiTestHost.RunAsync(Host(fake), async channel =>
{
var client = new AiService.AiServiceClient(channel);
Metadata metadata = AiTestHost.CallMetadata(AiTestHost.DefaultToken, tenantId: null);
RpcException exception = await Assert.ThrowsAsync<RpcException>(() =>
client.ClassifyAsync(
new ClassifyRequest { SystemPrompt = "S", UserContext = "U", ProviderConfig = RequestConfig() },
AiTestHost.CallOptions(metadata)).ResponseAsync);
Assert.Equal(StatusCode.Unauthenticated, exception.StatusCode);
Assert.Empty(fake.Calls);
});
}
// Конфиг DI сценария: фейк-провайдер + мгновенные паузы ретраев.
// fake: Фейк-провайдер вызовов.
private static Action<IServiceCollection> Host(FakeProviderClient fake)
=> services =>
{
AiTestHost.UseFakeProvider(services, fake);
AiTestHost.DisableRetryDelays(services);
};
// CallOptions с service-token и tenant-id сценария.
private static CallOptions Options()
=> AiTestHost.CallOptions(
AiTestHost.CallMetadata(AiTestHost.DefaultToken, AiTestHost.DefaultTenantId));
// Конфиг провайдера запроса (зеркало того, что ядро кладёт в тело запроса).
private static ProviderConfig RequestConfig()
=> new()
{
ProviderId = ProviderId,
BaseUrl = "https://api.example.com/v1",
Model = "deepseek-v4-flash",
ApiKey = "test-key",
};
// Фейк, всегда отвечающий заданным JSON-текстом с usage API-ответа.
// jsonText: JSON-текст ответа модели.
private static FakeProviderClient Success(string jsonText)
=> new((_, _, _) => Task.FromResult(new ProviderChatResult(jsonText, SampleUsage)));
// Фейк, всегда падающий транспортной ошибкой (повод для ретрая).
private static FakeProviderClient Failing()
=> new((_, _, _) => Task.FromException<ProviderChatResult>(new LlmHttpException("сеть недоступна")));
// Оценка токенов по символам (зеркало TokenEstimator; для проверки usage в ответе).
// charCount: Число символов.
private static uint EstimateTokens(int charCount)
=> (uint)((charCount + 3) / 4);
// Проверяет проброс usage провайдера в gRPC-ответ.
// usage: Usage ответа RPC.
// expected: Ожидаемое значение.
private static void AssertUsage(Deal.Grpc.Ai.Usage usage, ProviderUsage expected)
{
Assert.Equal((uint)expected.PromptTokens, usage.Prompt);
Assert.Equal((uint)expected.CompletionTokens, usage.Completion);
Assert.Equal((uint)expected.TotalTokens, usage.Total);
}
}
@@ -0,0 +1,139 @@
using System.Net;
using System.Net.Sockets;
using Deal.Ai.Llm;
using Deal.Grpc.Hosting.Interceptors;
using Deal.Grpc.Hosting.Models;
using Deal.Grpc.Hosting.Options;
using Deal.Grpc.Hosting.Services;
using Grpc.Core;
using Grpc.Net.Client;
using Microsoft.AspNetCore.Builder;
using Microsoft.Extensions.DependencyInjection;
namespace Deal.Ai.Tests.Ai;
internal static class AiTestHost
{
/// <summary>
/// Env-ключ ожидаемого service-token
/// </summary>
public const string ServiceTokenEnvKey = "DEAL_SERVICE_TOKEN";
public const string ServiceTokenMetadataKey = ServiceTokenInterceptor.ServiceTokenMetadataKey;
public const string TenantIdMetadataKey = AiServiceImpl.TenantIdMetadataKey;
/// <summary>
/// Токен сценариев теста.
/// </summary>
public const string DefaultToken = "deal-ai-test-token";
/// <summary>
/// Id тенанта сценариев по умолчанию.
/// </summary>
public const string DefaultTenantId = "tenant-test";
/// <summary>
/// Deadline RPC-вызовов теста
/// </summary>
public const int RpcDeadlineSeconds = 15;
/// <summary>
/// Прогоняет сценарий против хоста со стандартным токеном и фейк-подменой фасада.
/// </summary>
/// <param name="configureServices">Настройка DI сценария (фейк-провайдер, мгновенные ретраи).</param>
/// <param name="scenario">Сценарий с gRPC-каналом к хосту.</param>
public static Task RunAsync(Action<IServiceCollection> configureServices, Func<GrpcChannel, Task> scenario)
=> RunAsync(DefaultToken, configureServices, scenario);
/// <summary>
/// Прогоняет сценарий против поднятого хоста с заданным env-токеном и подменами DI.
/// </summary>
/// <param name="serviceToken">Значение env DEAL_SERVICE_TOKEN (null — убрать переменную).</param>
/// <param name="configureServices">Настройка DI сценария (может быть пустой).</param>
/// <param name="scenario">Сценарий с gRPC-каналом к хосту.</param>
public static async Task RunAsync(
string? serviceToken,
Action<IServiceCollection> configureServices,
Func<GrpcChannel, Task> scenario)
{
string? originalToken = Environment.GetEnvironmentVariable(ServiceTokenEnvKey);
Environment.SetEnvironmentVariable(ServiceTokenEnvKey, serviceToken);
WebApplication? app = null;
GrpcChannel? channel = null;
try
{
int port = FreeTcpPort();
app = AiServiceHost.Create(port, configureServices: configureServices);
await app.StartAsync();
channel = GrpcChannel.ForAddress($"http://127.0.0.1:{port}");
await scenario(channel);
}
finally
{
if (channel is not null)
{
channel.Dispose();
}
if (app is not null)
{
await app.StopAsync();
await app.DisposeAsync();
}
Environment.SetEnvironmentVariable(ServiceTokenEnvKey, originalToken);
}
}
/// <summary>
/// Подменяет HTTP-фасад вызовов модели фейком сценария
/// </summary>
/// <param name="fake">Фейк-провайдер сценария.</param>
public static void UseFakeProvider(IServiceCollection services, FakeProviderClient fake)
=> services.AddSingleton<IProviderClient>(fake);
/// <summary>
/// Делает паузы ретраев мгновенными
/// </summary>
public static void DisableRetryDelays(IServiceCollection services)
=> services.AddSingleton<Func<TimeSpan, CancellationToken, Task>>(static (_, _) => Task.CompletedTask);
/// <summary>
/// Строит metadata вызова
/// </summary>
/// <param name="serviceToken">Значение заголовка service-token.</param>
/// <param name="tenantId">Id тенанта (null — без заголовка tenant-id).</param>
public static Metadata CallMetadata(string? serviceToken, string? tenantId = null)
{
var metadata = new Metadata();
if (serviceToken is not null)
{
metadata.Add(ServiceTokenMetadataKey, serviceToken);
}
if (tenantId is not null)
{
metadata.Add(TenantIdMetadataKey, tenantId);
}
return metadata;
}
/// <summary>
/// CallOptions RPC
/// </summary>
/// <param name="metadata">Metadata вызова.</param>
public static CallOptions CallOptions(Metadata metadata)
=> new(metadata, deadline: DateTime.UtcNow.AddSeconds(RpcDeadlineSeconds));
// Возвращает свободный TCP-порт (127.0.0.1:0 → освобождение перед биндом хоста).
private static int FreeTcpPort()
{
using var listener = new TcpListener(IPAddress.Loopback, 0);
listener.Start();
return ((IPEndPoint)listener.LocalEndpoint).Port;
}
}
@@ -0,0 +1,39 @@
using Deal.Ai.Llm;
namespace Deal.Ai.Tests.Ai;
// Зафиксированный вызов фейк-провайдера (для проверки собранных RPC промптов).
// SystemPrompt: Системный промпт вызова.
// UserText: Пользовательское сообщение вызова.
// Config: Конфиг провайдера вызова.
internal sealed record FakeProviderCall(string SystemPrompt, string UserText, LlmConfig Config);
internal sealed class FakeProviderClient : IProviderClient
{
private readonly Func<string, string, LlmConfig, Task<ProviderChatResult>> _handler;
/// <summary>
/// Создаёт фейк с поведением сценария.
/// </summary>
/// <param name="handler">Поведение вызова: (systemPrompt, userText, config) → результат/сбой.</param>
public FakeProviderClient(Func<string, string, LlmConfig, Task<ProviderChatResult>> handler)
{
_handler = handler;
}
/// <summary>
/// Все вызовы фейка в порядке поступления
/// </summary>
public List<FakeProviderCall> Calls { get; } = [];
/// <inheritdoc />
public Task<ProviderChatResult> ChatAsync(
LlmConfig config,
string systemPrompt,
string userText,
CancellationToken cancellationToken)
{
Calls.Add(new FakeProviderCall(systemPrompt, userText, config));
return _handler(systemPrompt, userText, config);
}
}
@@ -0,0 +1,150 @@
using Deal.Ai.Llm;
using Microsoft.Extensions.Logging.Abstractions;
namespace Deal.Ai.Tests.Ai;
/// <summary>
/// Unit-тесты оркестратора вызовов модели
/// </summary>
public sealed class ProviderCallerTests
{
/// <summary>
/// Успех с первого вызова
/// </summary>
[Fact]
public async Task ChatJsonAsync_FirstAttemptSuccess_ReturnsJsonAndUsage()
{
var fake = new FakeProviderClient((_, _, _) => Task.FromResult(
new ProviderChatResult("""{"pass": false}""", new ProviderUsage(11, 5, 16))));
ProviderCaller caller = CreateCaller(fake);
LlmCallResult result = await caller.ChatJsonAsync(Config(), "system", "user", CancellationToken.None);
Assert.False((bool)result.Json["pass"]!);
Assert.Equal("""{"pass":false}""", result.JsonText);
Assert.Equal(16, result.Usage.TotalTokens);
Assert.Single(fake.Calls);
}
/// <summary>
/// Марdown-обёртка ответа модели снимается фасадом.
/// </summary>
[Fact]
public async Task ChatJsonAsync_MarkdownWrappedJson_Extracts()
{
var fake = new FakeProviderClient((_, _, _) => Task.FromResult(
new ProviderChatResult("```json\n{\"fit\": 1}\n```", Usage: null)));
ProviderCaller caller = CreateCaller(fake);
LlmCallResult result = await caller.ChatJsonAsync(Config(), "system", "user", CancellationToken.None);
Assert.Equal(1, (int)result.Json["fit"]!);
Assert.Single(fake.Calls);
}
/// <summary>
/// Без usage API-ответа фасад оценивает токены по символам
/// </summary>
[Fact]
public async Task ChatJsonAsync_WithoutProviderUsage_EstimatesTokens()
{
var fake = new FakeProviderClient((_, _, _) => Task.FromResult(
new ProviderChatResult("{}", Usage: null)));
ProviderCaller caller = CreateCaller(fake);
LlmCallResult result = await caller.ChatJsonAsync(Config(), "abcdefgh", "user", CancellationToken.None);
// prompt-текст = 8 + 4 = 12 символов → 3 токена; completion = "{}" = 2 символа → 1 токен.
Assert.Equal(3, result.Usage.PromptTokens);
Assert.Equal(1, result.Usage.CompletionTokens);
Assert.Equal(4, result.Usage.TotalTokens);
}
/// <summary>
/// Сбой на первых двух попытках и успех на третьей
/// </summary>
[Fact]
public async Task ChatJsonAsync_TwoFailuresThenSuccess_RetriesAndSucceeds()
{
int attempts = 0;
var fake = new FakeProviderClient((_, _, _) =>
{
attempts++;
return attempts < 3
? Task.FromException<ProviderChatResult>(new LlmHttpException("таймаут"))
: Task.FromResult(new ProviderChatResult("""{"ok": 1}""", Usage: null));
});
ProviderCaller caller = CreateCaller(fake);
LlmCallResult result = await caller.ChatJsonAsync(Config(), "system", "user", CancellationToken.None);
Assert.Equal(1, (int)result.Json["ok"]!);
Assert.Equal(3, attempts);
Assert.Equal(3, fake.Calls.Count);
}
/// <summary>
/// Все попытки — транспортный сбой
/// </summary>
[Fact]
public async Task ChatJsonAsync_AllTransportFailures_ThrowsProviderUnavailable()
{
var fake = new FakeProviderClient((_, _, _) =>
Task.FromException<ProviderChatResult>(new LlmHttpException("сеть недоступна")));
ProviderCaller caller = CreateCaller(fake);
LlmCallException exception = await Assert.ThrowsAsync<LlmCallException>(() =>
caller.ChatJsonAsync(Config(), "system", "user", CancellationToken.None));
Assert.Equal(LlmCallFailureKind.ProviderUnavailable, exception.Kind);
Assert.Null(exception.Usage);
Assert.Equal(
"ИИ (DeepSeek) не ответил корректно — повторите попытку через несколько секунд",
exception.Message);
Assert.Equal(LlmRetryPolicy.AttemptCount, fake.Calls.Count);
}
/// <summary>
/// Модель отвечала, но ни одна попытка не дала разбираемый JSON
/// </summary>
[Fact]
public async Task ChatJsonAsync_AllAnswersNotJson_ThrowsAnswerNotJsonWithUsage()
{
var fake = new FakeProviderClient((_, _, _) =>
Task.FromResult(new ProviderChatResult("сожалею, не понимаю", Usage: null)));
ProviderCaller caller = CreateCaller(fake);
LlmCallException exception = await Assert.ThrowsAsync<LlmCallException>(() =>
caller.ChatJsonAsync(Config(), "system", "user", CancellationToken.None));
Assert.Equal(LlmCallFailureKind.AnswerNotJson, exception.Kind);
Assert.NotNull(exception.Usage);
Assert.True(exception.Usage!.CompletionTokens > 0);
Assert.Equal(LlmRetryPolicy.AttemptCount, fake.Calls.Count);
}
/// <summary>
/// Отмена (deadline RPC) прерывает вызов без «упаковки» в ошибку провайдера
/// </summary>
[Fact]
public async Task ChatJsonAsync_Cancelled_PropagatesCancellation()
{
using var cancellation = new CancellationTokenSource();
cancellation.Cancel();
var fake = new FakeProviderClient(
(_, _, _) => Task.FromException<ProviderChatResult>(new OperationCanceledException()));
ProviderCaller caller = CreateCaller(fake);
await Assert.ThrowsAnyAsync<OperationCanceledException>(() =>
caller.ChatJsonAsync(Config(), "system", "user", cancellation.Token));
}
// Создаёт оркестратор с фейком и мгновенными паузами ретраев.
// fake: Фейк-провайдер.
private static ProviderCaller CreateCaller(FakeProviderClient fake)
=> new(fake, static (_, _) => Task.CompletedTask, NullLogger<ProviderCaller>.Instance);
// Типовой конфиг провайдера сценариев.
private static LlmConfig Config()
=> new("deepseek", "https://api.example.com/v1", "deepseek-v4-flash", "test-key", null);
}
@@ -0,0 +1,64 @@
using Deal.Ai.Llm;
namespace Deal.Ai.Tests.Ai;
/// <summary>
/// Unit-тесты оценки токенов
/// </summary>
public sealed class TokenEstimatorTests
{
/// <summary>
/// Usage провайдера проходит без изменений, включая total ≠ сумме
/// </summary>
[Fact]
public void Resolve_WithProviderUsage_PassesThrough()
{
var provider = new ProviderUsage(PromptTokens: 11, CompletionTokens: 5, TotalTokens: 16);
LlmUsage usage = TokenEstimator.Resolve(provider, "system", "text");
Assert.Equal(11, usage.PromptTokens);
Assert.Equal(5, usage.CompletionTokens);
Assert.Equal(16, usage.TotalTokens);
}
/// <summary>
/// Нет usage провайдера — оценка по символам
/// </summary>
[Fact]
public void Resolve_WithoutProviderUsage_EstimatesByChars()
{
// prompt-текст = 8 символов → 2 токена; completion-текст = 13 символов → ceil(13/4) = 4.
LlmUsage usage = TokenEstimator.Resolve(null, "12345678", """{"pass": true}""");
Assert.Equal(2, usage.PromptTokens);
Assert.Equal(4, usage.CompletionTokens);
Assert.Equal(6, usage.TotalTokens);
}
/// <summary>
/// Округление вверх
/// </summary>
[Fact]
public void Resolve_WithoutProviderUsage_RoundsUp()
{
LlmUsage fourChars = TokenEstimator.Resolve(null, "abcd", string.Empty);
LlmUsage fiveChars = TokenEstimator.Resolve(null, "abcde", string.Empty);
Assert.Equal(1, fourChars.PromptTokens);
Assert.Equal(2, fiveChars.PromptTokens);
}
/// <summary>
/// Пустые тексты дают нулевую оценку
/// </summary>
[Fact]
public void Resolve_EmptyTexts_ReturnsZeroTokens()
{
LlmUsage usage = TokenEstimator.Resolve(null, string.Empty, string.Empty);
Assert.Equal(0, usage.PromptTokens);
Assert.Equal(0, usage.CompletionTokens);
Assert.Equal(0, usage.TotalTokens);
}
}
@@ -0,0 +1,5 @@
// In-proc gRPC-тесты ai-service поднимают реальные Kestrel-хосты и меняют процесс-глобальную
// env-переменную DEAL_SERVICE_TOKEN на время сценария (AiTestHost и AiServiceHostTests).
// Параллельный прогон классов дал бы гонки на env — тесты сериализованы (тот же шаблон, что
// AssemblyInfo тестов ml/telegram-сервисов).
[assembly: CollectionBehavior(DisableTestParallelization = true)]
@@ -0,0 +1,41 @@
<Project Sdk="Microsoft.NET.Sdk">
<!--
Deal.Ai.Tests — интеграционные тесты каркаса ai-service (план Task 4, Acceptance):
хост (Kestrel HTTP/2) поднимается в процессе теста на эфемерном порту через AiServiceHost.Create
(та же сборка, что и Program.cs), проверяются gRPC-health → SERVING и ServiceTokenInterceptor
(нет/неверный токен → UNAUTHENTICATED; пустой env DEAL_SERVICE_TOKEN → fail-closed). Стек тестов —
как в Deal.Telegram.Tests (Task 2) и Deal.Ml.Tests (Task 3).
-->
<PropertyGroup>
<IsPackable>false</IsPackable>
</PropertyGroup>
<ItemGroup>
<PackageReference Include="coverlet.collector" Version="6.0.4" />
<PackageReference Include="Microsoft.NET.Test.Sdk" Version="17.14.1" />
<PackageReference Include="NSubstitute" Version="6.1.0" />
<PackageReference Include="xunit" Version="2.9.3" />
<PackageReference Include="xunit.runner.visualstudio" Version="3.1.4" />
</ItemGroup>
<ItemGroup>
<!-- Клиент gRPC в тестах (транспорт HTTP/2 + типы grpc.health.v1.Health). -->
<PackageReference Include="Grpc.Net.Client" Version="2.83.0" />
<PackageReference Include="Grpc.HealthCheck" Version="2.83.0" />
</ItemGroup>
<ItemGroup>
<!-- WebApplication/Kestrel-типы приходят из общего фреймворка ASP.NET Core (хосты тестов). -->
<FrameworkReference Include="Microsoft.AspNetCore.App" />
</ItemGroup>
<ItemGroup>
<ProjectReference Include="..\Deal.Ai\Deal.Ai.csproj" />
</ItemGroup>
<ItemGroup>
<Using Include="Xunit" />
</ItemGroup>
</Project>
@@ -0,0 +1,188 @@
using System.Net;
using System.Net.Sockets;
using Deal.Grpc.Ai;
using Grpc.Core;
using Grpc.Health.V1;
using Grpc.Net.Client;
using Microsoft.AspNetCore.Builder;
namespace Deal.Ai.Tests.Grpc;
/// <summary>
/// Интеграционные тесты хоста ai-service.
/// </summary>
public sealed class AiServiceHostTests
{
// Env-ключ ожидаемого токена (зеркало ServiceTokenInterceptor).
private const string ServiceTokenEnvKey = "DEAL_SERVICE_TOKEN";
// Ключ gRPC-metadata (зеркало ServiceTokenInterceptor.ServiceTokenMetadataKey).
private const string ServiceTokenMetadataKey = "service-token";
// Токен сценариев теста.
private const string ValidToken = "task4-test-token";
private const string TenantId = "tenant-test";
// Deadline RPC-вызовов теста (сек).
private const int RpcDeadlineSeconds = 10;
/// <summary>
/// HealthCheck (grpc.health.v1.Health/Check) отвечает SERVING — хост поднялся, gRPC-инфраструктура и health-сервис работают.
/// </summary>
[Fact]
public async Task HealthCheck_ReturnsServing()
{
await RunHostScenarioAsync(
ValidToken,
async channel =>
{
var health = new Health.HealthClient(channel);
HealthCheckResponse response = await health.CheckAsync(
new HealthCheckRequest(),
deadline: DateTime.UtcNow.AddSeconds(RpcDeadlineSeconds));
Assert.Equal(HealthCheckResponse.Types.ServingStatus.Serving, response.Status);
});
}
/// <summary>
/// Запрос без metadata «service-token» → UNAUTHENTICATED.
/// </summary>
[Fact]
public async Task Classify_WithoutToken_IsUnauthenticated()
{
await AssertDealRpcRejectedAsync(
ValidToken,
tokenHeader: null,
expected: StatusCode.Unauthenticated);
}
/// <summary>
/// Запрос с неверным токеном → UNAUTHENTICATED.
/// </summary>
[Fact]
public async Task Classify_WithWrongToken_IsUnauthenticated()
{
await AssertDealRpcRejectedAsync(
ValidToken,
tokenHeader: "wrong-token",
expected: StatusCode.Unauthenticated);
}
/// <summary>
/// Верный токен проходит интерцептор к методу — кодогенерация и маппинг сервиса работают
/// </summary>
[Fact]
public async Task Classify_WithValidToken_ReachesServiceAndValidatesConfig()
{
await AssertDealRpcRejectedAsync(
ValidToken,
tokenHeader: ValidToken,
expected: StatusCode.InvalidArgument);
}
/// <summary>
/// Fail-closed: DEAL_SERVICE_TOKEN не задан — Deal-RPC отклоняется всегда, в т.ч.
/// </summary>
[Fact]
public async Task WithoutConfiguredToken_DealRpcFailsClosed_HealthStillServing()
{
await RunHostScenarioAsync(
serviceToken: null,
async channel =>
{
var health = new Health.HealthClient(channel);
HealthCheckResponse healthResponse = await health.CheckAsync(
new HealthCheckRequest(),
deadline: DateTime.UtcNow.AddSeconds(RpcDeadlineSeconds));
Assert.Equal(HealthCheckResponse.Types.ServingStatus.Serving, healthResponse.Status);
// Пустое значение metadata — попытка обойти fail-closed (равно незаданному env-токену).
await AssertRejectedAsync(channel, string.Empty, StatusCode.Unauthenticated);
await AssertRejectedAsync(channel, ValidToken, StatusCode.Unauthenticated);
});
}
// Прогоняет Classify с заданным заголовком «service-token» (null — без заголовка) и проверяет
// ожидаемый код статуса RPC-исключения.
// serviceToken: Ожидаемый токен хоста (env DEAL_SERVICE_TOKEN).
// tokenHeader: Значение metadata «service-token» запроса либо null (нет заголовка).
// expected: Ожидаемый StatusCode ответа.
private static async Task AssertDealRpcRejectedAsync(
string? serviceToken,
string? tokenHeader,
StatusCode expected)
{
await RunHostScenarioAsync(
serviceToken,
channel => AssertRejectedAsync(channel, tokenHeader, expected));
}
private static async Task AssertRejectedAsync(
GrpcChannel channel,
string? tokenHeader,
StatusCode expected)
{
var client = new AiService.AiServiceClient(channel);
Metadata metadata = new() { { "tenant-id", TenantId } };
if (tokenHeader is not null)
{
metadata.Add(ServiceTokenMetadataKey, tokenHeader);
}
var callOptions = new CallOptions(
metadata,
deadline: DateTime.UtcNow.AddSeconds(RpcDeadlineSeconds));
AsyncUnaryCall<ClassifyReply> call = client.ClassifyAsync(new ClassifyRequest(), callOptions);
RpcException exception = await Assert.ThrowsAsync<RpcException>(() => call.ResponseAsync);
Assert.Equal(expected, exception.StatusCode);
}
// Поднимает хост на эфемерном порту с заданным env-токеном, выполняет сценарий и гарантированно
// гасит хост/канал и восстанавливает исходный env.
// serviceToken: Значение env DEAL_SERVICE_TOKEN для сценария (null — убрать).
// scenario: Сценарий с каналом к поднятому хосту.
private static async Task RunHostScenarioAsync(string? serviceToken, Func<GrpcChannel, Task> scenario)
{
string? originalToken = Environment.GetEnvironmentVariable(ServiceTokenEnvKey);
Environment.SetEnvironmentVariable(ServiceTokenEnvKey, serviceToken);
WebApplication? app = null;
GrpcChannel? channel = null;
try
{
int port = FreeTcpPort();
app = AiServiceHost.Create(port);
await app.StartAsync();
channel = GrpcChannel.ForAddress($"http://127.0.0.1:{port}");
await scenario(channel);
}
finally
{
if (channel is not null)
{
channel.Dispose();
}
if (app is not null)
{
await app.StopAsync();
await app.DisposeAsync();
}
Environment.SetEnvironmentVariable(ServiceTokenEnvKey, originalToken);
}
}
// Возвращает свободный TCP-порт (127.0.0.1:0 → освобождение перед биндом хоста).
private static int FreeTcpPort()
{
using var listener = new TcpListener(IPAddress.Loopback, 0);
listener.Start();
return ((IPEndPoint)listener.LocalEndpoint).Port;
}
}
@@ -0,0 +1,98 @@
using System.Text.Json.Nodes;
using Deal.Ai.Llm;
namespace Deal.Ai.Tests.Support;
/// <summary>
/// Unit-тесты извлечения JSON из ответа модели
/// </summary>
public sealed class JsonExtractorTests
{
/// <summary>
/// Чистая JSON-строка объекта разбирается как есть.
/// </summary>
[Fact]
public void TryExtractObject_PlainObject_Parses()
{
JsonObject? json = JsonExtractor.TryExtractObject("""{"pass": true, "reason": "ок"}""");
Assert.NotNull(json);
Assert.True((bool)json!["pass"]!);
}
/// <summary>
/// Markdown-обёртка ```json снимается
/// </summary>
[Fact]
public void TryExtractObject_JsonFence_Unwraps()
{
JsonObject? json = JsonExtractor.TryExtractObject("```json\n{\"fit\": 1}\n```");
Assert.NotNull(json);
Assert.Equal(1, (int)json!["fit"]!);
}
/// <summary>
/// Обёртка без метки языка и с прозой вокруг — тоже снимается.
/// </summary>
[Fact]
public void TryExtractObject_PlainFenceWithProse_Unwraps()
{
const string answer = "Вот результат:\n```\n{\"keywords\": [\"php\"]}\n```\nНадеюсь, поможет.";
JsonObject? json = JsonExtractor.TryExtractObject(answer);
Assert.NotNull(json);
Assert.Single((JsonArray)json!["keywords"]!);
}
/// <summary>
/// JSON внутри произвольного текста берётся срезом между первой «{» и последней «}».
/// </summary>
[Fact]
public void TryExtractObject_JsonInsideProse_Slices()
{
JsonObject? json = JsonExtractor.TryExtractObject("модель решила: {\"pass\": false} конец");
Assert.NotNull(json);
Assert.False((bool)json!["pass"]!);
}
/// <summary>
/// Текст без JSON — null
/// </summary>
[Fact]
public void TryExtractObject_NoJson_ReturnsNull()
{
Assert.Null(JsonExtractor.TryExtractObject("извините, не могу ответить"));
}
/// <summary>
/// Незакрытая обёртка и битый JSON — null, а не исключение.
/// </summary>
[Fact]
public void TryExtractObject_BrokenJson_ReturnsNull()
{
Assert.Null(JsonExtractor.TryExtractObject("```json\n{\"pass\": tru"));
Assert.Null(JsonExtractor.TryExtractObject("{\"pass\": "));
}
/// <summary>
/// JSON верхнего уровня не объект
/// </summary>
[Fact]
public void TryExtractObject_NonObjectRoot_ReturnsNull()
{
Assert.Null(JsonExtractor.TryExtractObject("[\"php\", \"c#\"]"));
Assert.Null(JsonExtractor.TryExtractObject("\"просто строка\""));
}
/// <summary>
/// Пустой/пробельный текст — null.
/// </summary>
[Fact]
public void TryExtractObject_Empty_ReturnsNull()
{
Assert.Null(JsonExtractor.TryExtractObject(string.Empty));
Assert.Null(JsonExtractor.TryExtractObject(" "));
}
}
@@ -0,0 +1,218 @@
using System.Net;
using System.Text.Json.Nodes;
using Deal.Ai.Llm;
namespace Deal.Ai.Tests.Support;
/// <summary>
/// HTTP-тесты LlmHttpClient на заглушке HttpMessageHandler
/// </summary>
public sealed class LlmHttpClientTests
{
// Таймауты тестового клиента (короткие — чтобы таймаут-сценарий не ждал 90/60 с).
private static readonly TimeSpan TestCallTimeout = TimeSpan.FromMilliseconds(60);
// Задержка заглушки для таймаут-сценария (должна превышать TestCallTimeout).
private static readonly TimeSpan TestHandlerDelay = TimeSpan.FromMilliseconds(300);
// База OpenAI-совместимого провайдера сценария (как у openai/ollama/lmstudio — с /v1).
private const string OpenAiBaseUrl = "https://api.example.com/v1";
// База Anthropic-провайдера сценария (без /v1 — путь добавляет клиент).
private const string AnthropicBaseUrl = "https://api.anthropic.com";
// Ответ OpenAI-совместимого API с текстом и usage.
private const string OpenAiJsonReply =
"""
{
"choices": [
{
"message": { "role": "assistant", "content": "{\"fit\": 1}" }
}
],
"usage": { "prompt_tokens": 10, "completion_tokens": 20, "total_tokens": 30 }
}
""";
// Ответ Anthropic Messages API: два text-блока и usage input/output.
private const string AnthropicJsonReply =
"""
{
"content": [
{ "type": "text", "text": "{\"fit\": 1}" },
{ "type": "text", "text": " ещё текст" }
],
"usage": { "input_tokens": 4, "output_tokens": 6 }
}
""";
/// <summary>
/// OpenAI-совместимый вызов
/// </summary>
[Fact]
public async Task ChatAsync_OpenAiStyle_BuildsWireRequest()
{
var handler = new StubHttpMessageHandler(StubHttpMessageHandler.JsonOk(OpenAiJsonReply));
IProviderClient client = CreateClient(handler);
ProviderChatResult result = await client.ChatAsync(
OpenAiConfig(apiKey: "secret-key"),
"Система",
"Сообщение",
CancellationToken.None);
CapturedHttpRequest request = handler.LastRequest;
Assert.StartsWith("POST https://api.example.com/v1/chat/completions", request.Url);
Assert.Equal("Bearer secret-key", StubHttpMessageHandler.BearerOf(request));
JsonObject body = StubHttpMessageHandler.BodyOf(request);
Assert.Equal("deepseek-v4-flash", (string?)body["model"]);
Assert.Equal(0.2, (double?)body["temperature"]);
Assert.Equal(8000, (int?)body["max_tokens"]);
JsonArray messages = (JsonArray)body["messages"]!;
Assert.Equal("system", (string?)messages[0]!["role"]);
Assert.Equal("Система", (string?)messages[0]!["content"]);
Assert.Equal("user", (string?)messages[1]!["role"]);
Assert.Equal("Сообщение", (string?)messages[1]!["content"]);
Assert.Equal("{\"fit\": 1}", result.Text);
Assert.Equal(new ProviderUsage(10, 20, 30), result.Usage);
}
/// <summary>
/// Локальный OpenAI-совместимый провайдер без ключа
/// </summary>
[Fact]
public async Task ChatAsync_OpenAiStyleWithoutApiKey_SkipsAuthorization()
{
var handler = new StubHttpMessageHandler(StubHttpMessageHandler.JsonOk(OpenAiJsonReply));
IProviderClient client = CreateClient(handler);
await client.ChatAsync(OpenAiConfig(apiKey: null), "Система", "Сообщение", CancellationToken.None);
Assert.Null(StubHttpMessageHandler.BearerOf(handler.LastRequest));
}
/// <summary>
/// Модель вернула только reasoning без ответа — сбой попытки.
/// </summary>
[Fact]
public async Task ChatAsync_OpenAiReasoningOnly_Throws()
{
const string reasoningOnlyReply =
"""{ "choices": [ { "message": { "role": "assistant", "reasoning_content": "хм, подумаю" } } ] }""";
var handler = new StubHttpMessageHandler(StubHttpMessageHandler.JsonOk(reasoningOnlyReply));
IProviderClient client = CreateClient(handler);
LlmHttpException exception = await Assert.ThrowsAsync<LlmHttpException>(() =>
client.ChatAsync(OpenAiConfig(), "Система", "Сообщение", CancellationToken.None));
Assert.Contains("reasoning", exception.Message, StringComparison.OrdinalIgnoreCase);
}
/// <summary>
/// Anthropic-вызов
/// </summary>
[Fact]
public async Task ChatAsync_AnthropicStyle_BuildsWireRequest()
{
var handler = new StubHttpMessageHandler(StubHttpMessageHandler.JsonOk(AnthropicJsonReply));
IProviderClient client = CreateClient(handler);
ProviderChatResult result = await client.ChatAsync(
AnthropicConfig(),
"Система",
"Сообщение",
CancellationToken.None);
CapturedHttpRequest request = handler.LastRequest;
Assert.StartsWith("POST https://api.anthropic.com/v1/messages", request.Url);
Assert.Equal("anthropic-key", request.Headers["x-api-key"]);
Assert.Equal("2023-06-01", request.Headers["anthropic-version"]);
JsonObject body = StubHttpMessageHandler.BodyOf(request);
Assert.Equal("claude-sonnet-5", (string?)body["model"]);
Assert.Equal(8000, (int?)body["max_tokens"]);
Assert.Equal("Система", (string?)body["system"]);
Assert.DoesNotContain("temperature", body);
JsonArray messages = (JsonArray)body["messages"]!;
Assert.Single(messages);
Assert.Equal("user", (string?)messages[0]!["role"]);
Assert.Equal("Сообщение", (string?)messages[0]!["content"]);
Assert.Equal("{\"fit\": 1} ещё текст", result.Text);
Assert.Equal(new ProviderUsage(4, 6, 10), result.Usage);
}
/// <summary>
/// HTTP-ошибка провайдера — сбой попытки с кодом статуса
/// </summary>
[Fact]
public async Task ChatAsync_HttpError_Throws()
{
var handler = new StubHttpMessageHandler(StubHttpMessageHandler.Status(HttpStatusCode.InternalServerError));
IProviderClient client = CreateClient(handler);
LlmHttpException exception = await Assert.ThrowsAsync<LlmHttpException>(() =>
client.ChatAsync(OpenAiConfig(), "Система", "Сообщение", CancellationToken.None));
Assert.Contains("500", exception.Message, StringComparison.Ordinal);
}
/// <summary>
/// Неожиданная форма ответа
/// </summary>
[Fact]
public async Task ChatAsync_UnexpectedBody_Throws()
{
var handler = new StubHttpMessageHandler(_ => new HttpResponseMessage(HttpStatusCode.OK)
{
Content = new StringContent("<html>upstream error</html>", System.Text.Encoding.UTF8, "text/html"),
});
IProviderClient client = CreateClient(handler);
await Assert.ThrowsAsync<LlmHttpException>(() =>
client.ChatAsync(OpenAiConfig(), "Система", "Сообщение", CancellationToken.None));
}
/// <summary>
/// Таймаут попытки
/// </summary>
[Fact]
public async Task ChatAsync_Timeout_Throws()
{
var handler = new StubHttpMessageHandler(
StubHttpMessageHandler.JsonOk(OpenAiJsonReply),
delay: TestHandlerDelay);
IProviderClient client = new LlmHttpClient(
TestHttpClient(handler),
TestCallTimeout,
TestCallTimeout);
LlmHttpException exception = await Assert.ThrowsAsync<LlmHttpException>(() =>
client.ChatAsync(OpenAiConfig(), "Система", "Сообщение", CancellationToken.None));
Assert.Contains("Таймаут", exception.Message, StringComparison.Ordinal);
}
// Конфиг OpenAI-совместимого вызова сценария.
// apiKey: Ключ API (null — локальный провайдер без ключа).
private static LlmConfig OpenAiConfig(string? apiKey = "test-key")
=> new("deepseek", OpenAiBaseUrl, "deepseek-v4-flash", apiKey, ApiStyle: null);
// Конфиг Anthropic-вызова сценария.
private static LlmConfig AnthropicConfig()
=> new("anthropic", AnthropicBaseUrl, "claude-sonnet-5", "anthropic-key", LlmConfig.AnthropicApiStyle);
// Клиент сценария над заглушкой (без общего таймаута — управление на попытку).
// handler: Заглушка обработчика.
private static LlmHttpClient CreateClient(StubHttpMessageHandler handler)
=> new(TestHttpClient(handler));
// HttpClient над заглушкой без общего таймаута (таймаут попытки задаёт клиент).
// handler: Заглушка обработчика.
private static HttpClient TestHttpClient(StubHttpMessageHandler handler)
=> new(handler) { Timeout = Timeout.InfiniteTimeSpan };
}
@@ -0,0 +1,106 @@
using System.Net;
using System.Text;
using System.Text.Json.Nodes;
namespace Deal.Ai.Tests.Support;
// Снимок HTTP-запроса, записанный заглушкой обработчика (для проверок wire-контракта).
// Url: Полный URL запроса.
// Headers: Заголовки запроса (включая заголовки содержимого).
// Body: Тело запроса (JSON-строка) либо null.
internal sealed record CapturedHttpRequest(
string Url,
IReadOnlyDictionary<string, string> Headers,
string? Body);
internal sealed class StubHttpMessageHandler : HttpMessageHandler
{
private readonly Func<HttpRequestMessage, HttpResponseMessage> _responder;
private readonly TimeSpan? _delay;
/// <summary>
/// Создаёт заглушку с ответчиком сценария.
/// </summary>
/// <param name="responder">Ответчик: request → response.</param>
/// <param name="delay">Необязательная задержка ответа (тест таймаута).</param>
public StubHttpMessageHandler(Func<HttpRequestMessage, HttpResponseMessage> responder, TimeSpan? delay = null)
{
_responder = responder;
_delay = delay;
}
/// <summary>
/// Запросы заглушки в порядке поступления.
/// </summary>
public List<CapturedHttpRequest> Requests { get; } = [];
/// <summary>
/// Последний запрос заглушки.
/// </summary>
public CapturedHttpRequest LastRequest => Requests[^1];
/// <inheritdoc />
protected override async Task<HttpResponseMessage> SendAsync(HttpRequestMessage request, CancellationToken cancellationToken)
{
string? body = request.Content is null
? null
: await request.Content.ReadAsStringAsync(cancellationToken);
var headers = new Dictionary<string, string>(StringComparer.OrdinalIgnoreCase);
foreach (KeyValuePair<string, IEnumerable<string>> header in request.Headers)
{
headers[header.Key] = string.Join(", ", header.Value);
}
if (request.Content?.Headers is { } contentHeaders)
{
foreach (KeyValuePair<string, IEnumerable<string>> header in contentHeaders)
{
headers[header.Key] = string.Join(", ", header.Value);
}
}
Requests.Add(new CapturedHttpRequest(
request.Method + " " + (request.RequestUri?.ToString() ?? string.Empty),
headers,
body));
if (_delay is { } delay)
{
await Task.Delay(delay, cancellationToken);
}
return _responder(request);
}
/// <summary>
/// Ответчик: JSON-тело с HTTP 200.
/// </summary>
/// <param name="json">Тело ответа.</param>
public static Func<HttpRequestMessage, HttpResponseMessage> JsonOk(string json)
=> _ => new HttpResponseMessage(HttpStatusCode.OK)
{
Content = new StringContent(json, Encoding.UTF8, "application/json"),
};
/// <summary>
/// Ответчик: заданный HTTP-статус без тела.
/// </summary>
/// <param name="statusCode">Код ответа.</param>
public static Func<HttpRequestMessage, HttpResponseMessage> Status(HttpStatusCode statusCode)
=> _ => new HttpResponseMessage(statusCode);
/// <summary>
/// Разбирает тело запроса как JSON-объект
/// </summary>
/// <param name="request">Снимок запроса.</param>
public static JsonObject BodyOf(CapturedHttpRequest request)
=> JsonNode.Parse(request.Body!)!.AsObject();
/// <summary>
/// Снимает заголовок авторизации Bearer
/// </summary>
/// <param name="request">Снимок запроса.</param>
public static string? BearerOf(CapturedHttpRequest request)
=> request.Headers.TryGetValue("Authorization", out string? value) ? value : null;
}
+76
View File
@@ -0,0 +1,76 @@
Microsoft Visual Studio Solution File, Format Version 12.00
# Visual Studio Version 17
VisualStudioVersion = 17.0.31903.59
MinimumVisualStudioVersion = 10.0.40219.1
Project("{FAE04EC0-301F-11D3-BF4B-00C04F79EFBC}") = "Deal.Ai", "Deal.Ai\Deal.Ai.csproj", "{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}"
EndProject
Project("{FAE04EC0-301F-11D3-BF4B-00C04F79EFBC}") = "Deal.Proto", "..\contracts\Deal.Proto.csproj", "{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}"
EndProject
Project("{FAE04EC0-301F-11D3-BF4B-00C04F79EFBC}") = "Deal.Ai.Tests", "Deal.Ai.Tests\Deal.Ai.Tests.csproj", "{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}"
EndProject
Project("{FAE04EC0-301F-11D3-BF4B-00C04F79EFBC}") = "Deal.Grpc.Hosting", "..\grpc-hosting\Deal.Grpc.Hosting\Deal.Grpc.Hosting.csproj", "{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}"
EndProject
Global
GlobalSection(SolutionConfigurationPlatforms) = preSolution
Debug|Any CPU = Debug|Any CPU
Debug|x64 = Debug|x64
Debug|x86 = Debug|x86
Release|Any CPU = Release|Any CPU
Release|x64 = Release|x64
Release|x86 = Release|x86
EndGlobalSection
GlobalSection(ProjectConfigurationPlatforms) = postSolution
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Debug|Any CPU.ActiveCfg = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Debug|Any CPU.Build.0 = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Debug|x64.ActiveCfg = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Debug|x64.Build.0 = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Debug|x86.ActiveCfg = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Debug|x86.Build.0 = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Release|Any CPU.ActiveCfg = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Release|Any CPU.Build.0 = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Release|x64.ActiveCfg = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Release|x64.Build.0 = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Release|x86.ActiveCfg = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C01}.Release|x86.Build.0 = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Debug|Any CPU.ActiveCfg = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Debug|Any CPU.Build.0 = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Debug|x64.ActiveCfg = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Debug|x64.Build.0 = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Debug|x86.ActiveCfg = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Debug|x86.Build.0 = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Release|Any CPU.ActiveCfg = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Release|Any CPU.Build.0 = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Release|x64.ActiveCfg = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Release|x64.Build.0 = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Release|x86.ActiveCfg = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C02}.Release|x86.Build.0 = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Debug|Any CPU.ActiveCfg = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Debug|Any CPU.Build.0 = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Debug|x64.ActiveCfg = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Debug|x64.Build.0 = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Debug|x86.ActiveCfg = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Debug|x86.Build.0 = Debug|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Release|Any CPU.ActiveCfg = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Release|Any CPU.Build.0 = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Release|x64.ActiveCfg = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Release|x64.Build.0 = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Release|x86.ActiveCfg = Release|Any CPU
{5D42B2A8-6E3F-4A71-9B2C-3D8E1F4A6C03}.Release|x86.Build.0 = Release|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Debug|Any CPU.ActiveCfg = Debug|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Debug|Any CPU.Build.0 = Debug|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Debug|x64.ActiveCfg = Debug|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Debug|x64.Build.0 = Debug|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Debug|x86.ActiveCfg = Debug|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Debug|x86.Build.0 = Debug|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Release|Any CPU.ActiveCfg = Release|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Release|Any CPU.Build.0 = Release|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Release|x64.ActiveCfg = Release|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Release|x64.Build.0 = Release|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Release|x86.ActiveCfg = Release|Any CPU
{9A1CB276-18E5-4A6A-B7EC-BC345AFE547C}.Release|x86.Build.0 = Release|Any CPU
EndGlobalSection
GlobalSection(SolutionProperties) = preSolution
HideSolutionNode = FALSE
EndGlobalSection
EndGlobal
+57
View File
@@ -0,0 +1,57 @@
using Deal.Grpc.Hosting.Interceptors;
using Deal.Grpc.Hosting.Models;
using Deal.Grpc.Hosting.Options;
using Deal.Grpc.Hosting.Services;
namespace Deal.Ai;
/// <summary>
/// Собирает WebApplication gRPC-хоста ai-service.
/// </summary>
public static class AiServiceHost
{
/// <summary>
/// Создаёт (не запускает) хост
/// </summary>
/// <param name="grpcPort">TCP-порт Kestrel.</param>
/// <param name="args">Аргументы командной строки (Program.cs); в тестах не нужны.</param>
/// <param name="configureServices">Опциональный хук DI для тестов (подмена LLM-фасада фейками: регистрация, добавленная здесь, побеждает — DI резолвит последнюю; см. AiServiceHostTests/AiRpcTests).</param>
/// <param name="configureBuilder">Опциональный хук конфигурации билдера для production-точки входа (Program.cs): Serilog. Тесты хост поднимают БЕЗ этого хука — логирование файлов/консоли тестам не нужно.</param>
/// <returns>Собранный хост; запуск — StartAsync/RunAsync у вызывающего.</returns>
public static WebApplication Create(
int grpcPort,
string[]? args = null,
Action<IServiceCollection>? configureServices = null,
Action<WebApplicationBuilder>? configureBuilder = null)
{
WebApplicationBuilder builder = WebApplication.CreateBuilder(args ?? []);
MtlsCertificates? mtlsCertificates = GrpcServer.LoadMtlsCertificates(builder);
GrpcServer.ConfigureKestrelHttp2Endpoint(builder, grpcPort, mtlsCertificates);
builder.Services.AddDealGrpcServer();
builder.Services.AddReadyHealthCheck("хост ai-service готов");
builder.Services.AddHttpClient<Llm.LlmHttpClient>(static httpClient =>
httpClient.Timeout = Timeout.InfiniteTimeSpan);
builder.Services.AddSingleton<Llm.IProviderClient>(
static sp => sp.GetRequiredService<Llm.LlmHttpClient>());
builder.Services.AddSingleton<Func<TimeSpan, CancellationToken, Task>>(DefaultRetryDelayAsync);
builder.Services.AddSingleton<Llm.ProviderCaller>();
configureServices?.Invoke(builder.Services);
configureBuilder?.Invoke(builder);
WebApplication app = builder.Build();
app.MapGrpcService<AiServiceImpl>();
app.MapGrpcHealthChecksService();
return app;
}
// Пауза между ретраями по умолчанию (Task.Delay; тесты подменяют через DI).
// delay: Длительность паузы.
// cancellationToken: Токен отмены.
private static Task DefaultRetryDelayAsync(TimeSpan delay, CancellationToken cancellationToken)
=> Task.Delay(delay, cancellationToken);
}
+448
View File
@@ -0,0 +1,448 @@
using System.Globalization;
using System.Text.Json.Nodes;
using Deal.Ai.Llm;
using Deal.Grpc.Ai;
using Grpc.Core;
namespace Deal.Ai;
/// <summary>
/// Реализация серверной стороны Deal.Grpc.Ai.AiService — команды ядра в ai-service.
/// </summary>
public sealed class AiServiceImpl : AiService.AiServiceBase
{
public const string TenantIdMetadataKey = "tenant-id";
// Деталь отказа: tenant-id отсутствует в metadata (UNAUTHENTICATED, шаблон MlServiceImpl).
private const string TenantIdMissingDetail = "tenant-id отсутствует в metadata";
// Деталь отказа: не задан конфиг ИИ-провайдера (INVALID_ARGUMENT).
private const string ProviderConfigMissingDetail = "Не задан конфиг ИИ-провайдера (provider_config)";
// Деталь отказа: пустой base_url конфига (INVALID_ARGUMENT).
private const string ProviderBaseUrlEmptyDetail = "Конфиг ИИ-провайдера: пустой base_url";
// Деталь отказа: пустая model конфига (INVALID_ARGUMENT).
private const string ProviderModelEmptyDetail = "Конфиг ИИ-провайдера: пустая model";
// Деталь отказа: текст сообщения длиннее контрактного лимита (INVALID_ARGUMENT).
private const string MessageTextTooLongDetail = "Слишком длинный текст сообщения";
// Деталь отказа: промпт длиннее защитного лимита (INVALID_ARGUMENT).
private const string PromptTooLongDetail = "Слишком длинный промпт";
// Деталь отказа: описание ниши/задачи длиннее контрактного лимита (INVALID_ARGUMENT).
private const string DescriptionTooLongDetail = "Слишком длинное описание ниши/задачи";
// Деталь отказа: контекст Classify длиннее защитного лимита (INVALID_ARGUMENT).
private const string UserContextTooLongDetail = "Слишком длинный контекст разбора";
// Деталь отказа: слишком много ключей задачи в EvaluateFit (INVALID_ARGUMENT).
private const string TooManyKeywordsDetail = "Слишком много ключей задачи";
// Деталь отказа: ключ задачи длиннее лимита (INVALID_ARGUMENT).
private const string KeywordTooLongDetail = "Слишком длинный ключ задачи";
private const int MaxTextLength = 4000;
private const int MaxDescriptionLength = 4000;
// Защитный потолок длины промпта (Filter.prompt/Classify.system_prompt; лимит не декларирован).
private const int MaxPromptLength = 20000;
// Защитный потолок длины user-контекста Classify (лимит не декларирован).
private const int MaxUserContextLength = 20000;
private const int MaxKeywordsCount = 200;
private const int MaxKeywordLength = 200;
private const string FilterUserPrefix = "Сообщение:\n";
private const string KeywordsUserPrefix = "Описание ниши/задачи:\n";
private const string GenerateKeywordsSystemPrompt =
"Ты — эксперт по поиску Telegram-каналов и групп. По описанию ниши/задачи "
+ "составь поисковые ключевые слова, по которым в глобальном поиске Telegram "
+ "находят подходящие источники. Верни строго JSON вида "
+ "{\"keywords\": [\"...\", \"...\"]}. Требования к списку:\n"
+ "- 1016 ключей;\n"
+ "- примерно поровну русских и английских (английские — популярные в нише термины);\n"
+ "- короткие фразы 1–4 слова;\n"
+ "- без #, @, кавычек и лишней пунктуации;\n"
+ "- конкретные для ниши, включая сленг заказчиков и подрядчиков;\n"
+ "- без дублей и близких по смыслу повторов.";
private const string EvaluateFitSystemPromptTemplate =
"Оцени, относится ли сообщение к сфере/задаче. Описание: {0}. Ключи: {1}. "
+ "Верни JSON {{\"fit\": 0|1, \"reason\": \"краткая причина\"}}.";
private const int MaxEvalReasonLength = 200;
private const string FitReasonDefault = "подходит";
private const string NotFitReasonDefault = "не подходит";
private const string PassFieldName = "pass";
// Имя поля причины в JSON-ответе модели.
private const string ReasonFieldName = "reason";
private const string FitFieldName = "fit";
// Имя поля списка ключевых слов в JSON-ответе модели.
private const string KeywordsFieldName = "keywords";
private static readonly IReadOnlySet<string> FalsyAnswerValues = new HashSet<string>(StringComparer.OrdinalIgnoreCase)
{
"0",
"false",
"no",
"нет",
"null",
"none",
};
private readonly ProviderCaller _caller;
private readonly ILogger<AiServiceImpl> _logger;
/// <summary>
/// Создаёт gRPC-сервис команд ядра поверх LLM-фасада.
/// </summary>
/// <param name="caller">Оркестратор вызовов модели (ретраи + извлечение JSON + usage).</param>
/// <param name="logger">Логгер аудита.</param>
public AiServiceImpl(ProviderCaller caller, ILogger<AiServiceImpl> logger)
{
_caller = caller;
_logger = logger;
}
/// <summary>
/// Filter — ИИ-фильтр входящих сообщений
/// </summary>
public override async Task<FilterReply> Filter(FilterRequest request, ServerCallContext context)
{
string tenantId = RequireTenantId(context);
EnsureLengthAtMost(request.Text, MaxTextLength, MessageTextTooLongDetail);
EnsureLengthAtMost(request.Prompt, MaxPromptLength, PromptTooLongDetail);
LlmConfig config = ResolveConfig(request.ProviderConfig);
try
{
LlmCallResult result = await _caller
.ChatJsonAsync(config, request.Prompt, FilterUserPrefix + request.Text, context.CancellationToken)
.ConfigureAwait(false);
bool pass = ReadBoolField(result.Json, PassFieldName, defaultValue: true);
string? reason = ReadStringField(result.Json, ReasonFieldName);
var reply = new FilterReply { Pass = pass, Usage = ToUsage(result.Usage) };
if (reason is not null)
{
reply.Reason = reason;
}
_logger.LogInformation(
"Аудит: tenant {TenantId} filter → pass={Pass}, usage={TotalTokens}",
tenantId,
pass,
result.Usage.TotalTokens);
return reply;
}
catch (LlmCallException callError)
{
LogAiUnavailable("filter", tenantId, config, callError);
throw ToUnavailable(callError);
}
}
/// <summary>
/// Classify — полный разбор лида
/// </summary>
public override async Task<ClassifyReply> Classify(ClassifyRequest request, ServerCallContext context)
{
string tenantId = RequireTenantId(context);
EnsureLengthAtMost(request.SystemPrompt, MaxPromptLength, PromptTooLongDetail);
EnsureLengthAtMost(request.UserContext, MaxUserContextLength, UserContextTooLongDetail);
LlmConfig config = ResolveConfig(request.ProviderConfig);
try
{
LlmCallResult result = await _caller
.ChatJsonAsync(config, request.SystemPrompt, request.UserContext, context.CancellationToken)
.ConfigureAwait(false);
var reply = new ClassifyReply { Ok = true, Json = result.JsonText, Usage = ToUsage(result.Usage) };
_logger.LogInformation(
"Аудит: tenant {TenantId} classify → ok=true, usage={TotalTokens}",
tenantId,
result.Usage.TotalTokens);
return reply;
}
catch (LlmCallException callError) when (callError.Kind == LlmCallFailureKind.AnswerNotJson)
{
// «Ответ без разбираемого JSON» — контрактная форма ClassifyReply.ok=false (README ai.proto).
_logger.LogWarning(
"Аудит: tenant {TenantId} classify → ok=false ({Provider}): ответ модели без JSON",
tenantId,
config.DisplayName);
var reply = new ClassifyReply { Ok = false, Usage = ToUsage(callError.Usage) };
return reply;
}
catch (LlmCallException callError)
{
LogAiUnavailable("classify", tenantId, config, callError);
throw ToUnavailable(callError);
}
}
/// <summary>
/// GenerateKeywords — ключевые слова discovery-задачи по описанию
/// </summary>
public override async Task<GenerateKeywordsReply> GenerateKeywords(GenerateKeywordsRequest request, ServerCallContext context)
{
string tenantId = RequireTenantId(context);
EnsureLengthAtMost(request.Description, MaxDescriptionLength, DescriptionTooLongDetail);
LlmConfig config = ResolveConfig(request.ProviderConfig);
try
{
LlmCallResult result = await _caller
.ChatJsonAsync(
config,
GenerateKeywordsSystemPrompt,
KeywordsUserPrefix + request.Description,
context.CancellationToken)
.ConfigureAwait(false);
var reply = new GenerateKeywordsReply { Usage = ToUsage(result.Usage) };
reply.Keywords.AddRange(ReadKeywords(result.Json));
_logger.LogInformation(
"Аудит: tenant {TenantId} generate_keywords → keywords={Count}, usage={TotalTokens}",
tenantId,
reply.Keywords.Count,
result.Usage.TotalTokens);
return reply;
}
catch (LlmCallException callError)
{
LogAiUnavailable("generate_keywords", tenantId, config, callError);
throw ToUnavailable(callError);
}
}
/// <summary>
/// EvaluateFit — оценка соответствия сообщения задаче поиска
/// </summary>
public override async Task<EvaluateFitReply> EvaluateFit(EvaluateFitRequest request, ServerCallContext context)
{
string tenantId = RequireTenantId(context);
EnsureLengthAtMost(request.Text, MaxTextLength, MessageTextTooLongDetail);
EnsureLengthAtMost(request.Description, MaxDescriptionLength, DescriptionTooLongDetail);
EnsureKeywordsWithinBounds(request.Keywords);
LlmConfig config = ResolveConfig(request.ProviderConfig);
try
{
string systemPrompt = string.Format(
CultureInfo.InvariantCulture,
EvaluateFitSystemPromptTemplate,
request.Description,
JoinKeywords(request.Keywords));
LlmCallResult result = await _caller
.ChatJsonAsync(config, systemPrompt, FilterUserPrefix + request.Text, context.CancellationToken)
.ConfigureAwait(false);
bool fit = ReadBoolField(result.Json, FitFieldName, defaultValue: false);
string reason = ReadFitReason(result.Json, fit);
var reply = new EvaluateFitReply { Fit = fit, Reason = reason, Usage = ToUsage(result.Usage) };
_logger.LogInformation(
"Аудит: tenant {TenantId} evaluate_fit → fit={Fit}, usage={TotalTokens}",
tenantId,
fit,
result.Usage.TotalTokens);
return reply;
}
catch (LlmCallException callError)
{
LogAiUnavailable("evaluate_fit", tenantId, config, callError);
throw ToUnavailable(callError);
}
}
private static string RequireTenantId(ServerCallContext context)
{
string? tenantId = context.RequestHeaders.GetValue(TenantIdMetadataKey);
if (string.IsNullOrWhiteSpace(tenantId))
{
throw new RpcException(new Status(StatusCode.Unauthenticated, TenantIdMissingDetail));
}
return tenantId;
}
// INVALID_ARGUMENT при превышении лимита длины текстового поля (серверный enforcement ai.proto).
// value: Значение поля запроса (в proto строка не бывает null).
// maxLength: Допустимый максимум символов.
// detail: Текст отказа (detail RPC).
private static void EnsureLengthAtMost(
string value,
int maxLength,
string detail)
{
if (value.Length > maxLength)
{
throw new RpcException(new Status(StatusCode.InvalidArgument, detail));
}
}
// Проверяет число и длины ключей задачи EvaluateFit (защита промпта от раздувания).
// keywords: Ключи задачи из запроса.
private static void EnsureKeywordsWithinBounds(IEnumerable<string> keywords)
{
int count = 0;
foreach (string keyword in keywords)
{
if (++count > MaxKeywordsCount)
{
throw new RpcException(new Status(StatusCode.InvalidArgument, TooManyKeywordsDetail));
}
if (keyword.Length > MaxKeywordLength)
{
throw new RpcException(new Status(StatusCode.InvalidArgument, KeywordTooLongDetail));
}
}
}
// Проверяет конфиг провайдера и строит рабочий конфиг вызова. Конфиг невалиден (пустые
// base_url/model) — INVALID_ARGUMENT: без конфига вызов модели невозможен.
// providerConfig: Конфиг из тела запроса (ядро всегда заполняет).
private static LlmConfig ResolveConfig(ProviderConfig? providerConfig)
{
if (providerConfig is null)
{
throw new RpcException(new Status(StatusCode.InvalidArgument, ProviderConfigMissingDetail));
}
if (string.IsNullOrWhiteSpace(providerConfig.BaseUrl))
{
throw new RpcException(new Status(StatusCode.InvalidArgument, ProviderBaseUrlEmptyDetail));
}
if (string.IsNullOrWhiteSpace(providerConfig.Model))
{
throw new RpcException(new Status(StatusCode.InvalidArgument, ProviderModelEmptyDetail));
}
return new LlmConfig(
providerConfig.ProviderId,
providerConfig.BaseUrl,
providerConfig.Model,
providerConfig.ApiKey,
providerConfig.ApiStyle);
}
private void LogAiUnavailable(
string method,
string tenantId,
LlmConfig config,
LlmCallException callError)
=> _logger.LogWarning(
"Аудит: tenant {TenantId} {Method} → ИИ ({Provider}) недоступен ({Kind})",
tenantId,
method,
config.DisplayName,
callError.Kind);
private static RpcException ToUnavailable(LlmCallException callError)
=> new(new Status(StatusCode.Unavailable, callError.Message));
private static bool ReadBoolField(
JsonObject json,
string fieldName,
bool defaultValue)
{
if (json[fieldName] is not JsonValue value)
{
return defaultValue;
}
if (value.TryGetValue<bool>(out bool flag))
{
return flag;
}
if (value.TryGetValue<string>(out string? raw) && raw is not null)
{
string text = raw.Trim();
return text.Length == 0 ? defaultValue : !FalsyAnswerValues.Contains(text);
}
if (value.TryGetValue<int>(out int number))
{
return number != 0;
}
return value.TryGetValue<double>(out double fractional) && fractional != 0;
}
// Читает строковое поле ответа модели (null — поля нет/не строка/пусто).
// json: Корневой объект ответа модели.
// fieldName: Имя поля.
private static string? ReadStringField(JsonObject json, string fieldName)
{
if (json[fieldName] is not JsonValue value || !value.TryGetValue<string>(out string? text))
{
return null;
}
string trimmed = text.Trim();
return trimmed.Length == 0 ? null : trimmed;
}
private static string ReadFitReason(JsonObject json, bool fit)
{
string reason = ReadStringField(json, ReasonFieldName) ?? (fit ? FitReasonDefault : NotFitReasonDefault);
return reason.Length <= MaxEvalReasonLength ? reason : reason[..MaxEvalReasonLength];
}
// Читает список ключевых слов из ответа модели (не-строки пропускаются; чистку — ядро).
// json: Корневой объект ответа модели.
private static IEnumerable<string> ReadKeywords(JsonObject json)
{
if (json[KeywordsFieldName] is not JsonArray keywords)
{
yield break;
}
foreach (JsonNode? keywordNode in keywords)
{
if (keywordNode is JsonValue value && value.TryGetValue<string>(out string? keyword))
{
string trimmed = keyword.Trim();
if (trimmed.Length > 0)
{
yield return trimmed;
}
}
}
}
private static string JoinKeywords(IEnumerable<string> keywords)
=> string.Join(
", ",
keywords.Where(keyword => !string.IsNullOrWhiteSpace(keyword)).Select(keyword => keyword.Trim()));
// Маппит итоговую оценку токенов в gRPC-usage (null → нули — контрактный ответ без usage).
// usage: Оценка токенов вызова.
private static Usage ToUsage(LlmUsage? usage)
=> new()
{
Prompt = usage is null ? 0U : (uint)usage.PromptTokens,
Completion = usage is null ? 0U : (uint)usage.CompletionTokens,
Total = usage is null ? 0U : (uint)usage.TotalTokens,
};
}
+5
View File
@@ -0,0 +1,5 @@
using System.Runtime.CompilerServices;
// Тесты (Deal.Ai.Tests) проверяют таймауты HTTP-попыток фасада через конструктор LlmHttpClient с
// короткими таймаутами (внутренний) — публичный контракт ради тестов не расширяется.
[assembly: InternalsVisibleTo("Deal.Ai.Tests")]
+43
View File
@@ -0,0 +1,43 @@
<Project Sdk="Microsoft.NET.Sdk.Web">
<!--
Deal.Ai — gRPC-хост ai-service (план Task 4/7/8; Ruling 1/2/5/12).
Кодогенерация .proto — в общем проекте src/contracts/Deal.Proto.csproj (Task 1, Ruling 1):
сервис подключает его ProjectReference и использует сгенерированную серверную базу
Deal.Grpc.Ai.AiService.AiServiceBase (решение по способу подключения — T2, см. task-2-report).
Клиентская сторона ai.proto сгенерирована в Deal.Proto (GrpcServices="Both") — понадобится
core-адаптерам GrpcAiClassifier/GrpcAiTools (Ruling 6, задачи 15/17).
Логика LLM-фасада (OpenAI-совместимые + Anthropic; НЕ БД — Ruling 5) реализована в задачах 7–8:
фасад в Deal.Ai/Llm (HTTP-клиент провайдеров, ретраи, JSON-извлечение, usage), RPC
Filter/Classify/GenerateKeywords/EvaluateFit — в AiServiceImpl поверх фасада.
Сборка: 0 warnings / 0 errors (TreatWarningsAsErrors, Directory.Build.props каталога сервиса).
-->
<PropertyGroup>
<AssemblyName>Deal.Ai</AssemblyName>
<RootNamespace>Deal.Ai</RootNamespace>
</PropertyGroup>
<ItemGroup>
<!-- Структурированные логи Serilog (Ruling 7, план Task 14): JSON-консоль + rolling-файл
data/logs/deal-ai-*.json; конфигурация — Deal.Ai/DealLogging.cs (Program.cs).
Пакет тянет консоль/файл/compact-формат транзитивно. -->
<PackageReference Include="Serilog.AspNetCore" Version="10.0.0" />
</ItemGroup>
<ItemGroup>
<!-- gRPC-сервер ASP.NET Core (Kestrel HTTP/2) + стандартный gRPC-health (Ruling 12). -->
<PackageReference Include="Grpc.AspNetCore" Version="2.83.0" />
<PackageReference Include="Grpc.AspNetCore.HealthChecks" Version="2.83.0" />
</ItemGroup>
<ItemGroup>
<!-- Общая серверная обвязка gRPC-хостов (C31): интерцепторы/mTLS/DealLogging/GrpcServer —
единый источник вместо копий в трёх сервисах. -->
<ProjectReference Include="..\..\grpc-hosting\Deal.Grpc.Hosting\Deal.Grpc.Hosting.csproj" />
<ProjectReference Include="..\..\contracts\Deal.Proto.csproj" />
</ItemGroup>
</Project>
+43
View File
@@ -0,0 +1,43 @@
# ai-service: gRPC-хост ИИ-фасада (план Task 4; Ruling 12 — запись в deploy/compose.dev.yml).
#
# КОНТЕКСТ СБОРКИ — корень репозитория: Deal.Ai.csproj ссылается на src/contracts/Deal.Proto.csproj
# (общий проект кодогенерации, Task 1) вне каталога сервиса, поэтому нельзя собирать из
# src/ai-service. Запуск из корня: docker build -f src/ai-service/Deal.Ai/Dockerfile .
# Порт — env GRPC_PORT (Program.cs), в compose.dev.yml задан 5102.
# --- Этап сборки: restore + publish ---
FROM mcr.microsoft.com/dotnet/sdk:10.0 AS build
WORKDIR /repo
# Restore-слой: только csproj/props (кэш слоёв Docker — restore не повторяется при правке исходников).
COPY src/contracts/Deal.Proto.csproj src/contracts/
COPY src/grpc-hosting/Deal.Grpc.Hosting/Deal.Grpc.Hosting.csproj src/grpc-hosting/Deal.Grpc.Hosting/
COPY src/ai-service/Directory.Build.props src/ai-service/
COPY src/ai-service/Deal.Ai/Deal.Ai.csproj src/ai-service/Deal.Ai/
RUN dotnet restore src/ai-service/Deal.Ai/Deal.Ai.csproj
# Исходники: контракты (.proto) + общая gRPC-обвязка + проект сервиса.
COPY src/contracts/ src/contracts/
COPY src/grpc-hosting/ src/grpc-hosting/
COPY src/ai-service/Deal.Ai/ src/ai-service/Deal.Ai/
RUN dotnet publish src/ai-service/Deal.Ai/Deal.Ai.csproj -c Release -o /app/publish
# --- Runtime-этап ---
FROM mcr.microsoft.com/dotnet/aspnet:10.0 AS final
WORKDIR /app
EXPOSE 5102
COPY --from=build /app/publish .
# grpc_health_probe — healthcheck контейнера (Ruling 12): gRPC-health освобождён от service-token
# (см. ServiceTokenInterceptor), поэтому проба идёт без metadata.
COPY --from=ghcr.io/grpc-ecosystem/grpc-health-probe:v0.4.35 /ko-app/grpc-health-probe /bin/grpc_health_probe
# Volume-ов нет: ai-service без БД и без персистентных файлов (Ruling 5) — конфиг провайдера
# (id/base/model/apiKey/api_style) приходит в теле каждого запроса от ядра, ответы не хранятся.
# Non-root: процесс работает пользователем deal (UID 10001); персистентных файлов нет.
RUN useradd --uid 10001 --shell /usr/sbin/nologin --no-create-home deal
ENV HOME=/tmp
USER deal
ENTRYPOINT ["dotnet", "Deal.Ai.dll"]
@@ -0,0 +1,20 @@
namespace Deal.Ai.Llm;
/// <summary>
/// Абстракция одного HTTP-вызова LLM-провайдера.
/// </summary>
public interface IProviderClient
{
/// <summary>
/// Выполняет один вызов модели по системному и пользовательскому сообщениям.
/// </summary>
/// <param name="config">Конфиг активного провайдера (стиль API выбирается по <c>ApiStyle</c>).</param>
/// <param name="systemPrompt">Системный промпт (заполненный ядром либо фиксированный сервиса).</param>
/// <param name="userText">Пользовательское сообщение/контекст.</param>
/// <returns>Текст ответа модели и usage API-ответа (null — провайдер usage не вернул).</returns>
public Task<ProviderChatResult> ChatAsync(
LlmConfig config,
string systemPrompt,
string userText,
CancellationToken cancellationToken);
}
@@ -0,0 +1,72 @@
using System.Text.Json;
using System.Text.Json.Nodes;
namespace Deal.Ai.Llm;
/// <summary>
/// Извлечение JSON-объекта из ответа модели
/// </summary>
public static class JsonExtractor
{
// Маркер markdown-обёртки кода в ответах моделей.
private const string CodeFence = "```";
// Метка языка после открывающей обёртки (```json).
private const string JsonFenceLabel = "json";
/// <summary>
/// Пытается извлечь JSON-объект из текста ответа модели.
/// </summary>
/// <param name="text">Сырой ответ модели.</param>
/// <returns>Объект JSON либо null (нет JSON/не объект/не разбирается).</returns>
public static JsonObject? TryExtractObject(string text)
{
if (string.IsNullOrWhiteSpace(text))
{
return null;
}
string candidate = UnwrapFence(text.Trim()) ?? text.Trim();
int openBrace = candidate.IndexOf('{');
int closeBrace = candidate.LastIndexOf('}');
if (openBrace < 0 || closeBrace <= openBrace)
{
return null;
}
string slice = candidate[openBrace..(closeBrace + 1)];
try
{
return JsonNode.Parse(slice) as JsonObject;
}
catch (JsonException)
{
return null;
}
}
private static string? UnwrapFence(string raw)
{
int open = raw.IndexOf(CodeFence, StringComparison.Ordinal);
if (open < 0)
{
return null;
}
int contentStart = open + CodeFence.Length;
int close = raw.IndexOf(CodeFence, contentStart, StringComparison.Ordinal);
if (close < 0)
{
return null;
}
string inner = raw[contentStart..close].Trim();
if (inner.StartsWith(JsonFenceLabel, StringComparison.OrdinalIgnoreCase))
{
inner = inner[JsonFenceLabel.Length..].TrimStart();
}
return inner;
}
}
@@ -0,0 +1,36 @@
namespace Deal.Ai.Llm;
/// <summary>
/// Итоговая ошибка вызова после исчерпания ретраев.
/// </summary>
public sealed class LlmCallException : Exception
{
// Шаблон текста ошибки (имя провайдера из конфига).
private const string DetailTemplate = "ИИ ({0}) не ответил корректно — повторите попытку через несколько секунд";
/// <summary>
/// Создаёт итоговую ошибку вызова после исчерпания попыток.
/// </summary>
/// <param name="kind">Причина исчерпания (см. <see cref="LlmCallFailureKind"/>).</param>
/// <param name="providerDisplayName">Отображаемое имя провайдера (без ключей).</param>
/// <param name="usage">Usage последней ответившей попытки (для Kind=AnswerNotJson; иначе null).</param>
public LlmCallException(
LlmCallFailureKind kind,
string providerDisplayName,
LlmUsage? usage = null)
: base(string.Format(DetailTemplate, providerDisplayName))
{
Kind = kind;
Usage = usage;
}
/// <summary>
/// Причина исчерпания попыток вызова.
/// </summary>
public LlmCallFailureKind Kind { get; }
/// <summary>
/// Usage последней попытки, вернувшей текст модели
/// </summary>
public LlmUsage? Usage { get; }
}
@@ -0,0 +1,17 @@
namespace Deal.Ai.Llm;
/// <summary>
/// Причина исчерпания попыток вызова
/// </summary>
public enum LlmCallFailureKind
{
/// <summary>
/// Провайдер не ответил после ретраев
/// </summary>
ProviderUnavailable,
/// <summary>
/// Модель отвечала текстом, но JSON не извлечён после ретраев
/// </summary>
AnswerNotJson,
}
@@ -0,0 +1,16 @@
using System.Text.Json.Nodes;
namespace Deal.Ai.Llm;
/// <summary>
/// Успешный результат вызова модели
/// </summary>
/// <param name="Json">Корневой объект JSON-ответа модели.</param>
/// <param name="Usage">Итоговая оценка токенов вызова.</param>
public sealed record LlmCallResult(JsonObject Json, LlmUsage Usage)
{
/// <summary>
/// Извлечённый ответ модели компактной json-строкой
/// </summary>
public string JsonText => Json.ToJsonString();
}
+41
View File
@@ -0,0 +1,41 @@
namespace Deal.Ai.Llm;
/// <summary>
/// Эффективный конфиг LLM-провайдера на один вызов
/// </summary>
public sealed record LlmConfig(
string ProviderId,
string BaseUrl,
string Model,
string? ApiKey,
string? ApiStyle)
{
/// <summary>
/// Значение api_style для Anthropic Messages API
/// </summary>
public const string AnthropicApiStyle = "anthropic";
private static readonly IReadOnlyDictionary<string, string> KnownProviderNames =
new Dictionary<string, string>(StringComparer.OrdinalIgnoreCase)
{
["deepseek"] = "DeepSeek",
["openai"] = "OpenAI",
["openrouter"] = "OpenRouter",
["anthropic"] = "Anthropic Claude",
["ollama"] = "Ollama (локально)",
["lmstudio"] = "LM Studio (локально)",
["custom"] = "Другой (OpenAI-совместимый)",
};
/// <summary>
/// Истинно, когда конфиг задаёт Anthropic Messages API
/// </summary>
public bool IsAnthropic => string.Equals(ApiStyle, AnthropicApiStyle, StringComparison.OrdinalIgnoreCase);
/// <summary>
/// Имя провайдера для сообщений об ошибках и логов
/// </summary>
public string DisplayName => KnownProviderNames.TryGetValue(ProviderId, out string? name)
? name
: ProviderId;
}
+303
View File
@@ -0,0 +1,303 @@
using System.Net.Http.Headers;
using System.Text;
using System.Text.Json.Nodes;
namespace Deal.Ai.Llm;
/// <summary>
/// HTTP-реализация <see cref="IProviderClient"/>
/// </summary>
public sealed class LlmHttpClient : IProviderClient
{
// Относительный путь OpenAI-совместимого эндпоинта (база уже без хвостового «/»).
private const string OpenAiCompletionsPath = "/chat/completions";
// Относительный путь Anthropic Messages API.
private const string AnthropicMessagesPath = "/v1/messages";
// Заголовок версии Anthropic API.
private const string AnthropicVersionHeader = "anthropic-version";
private const string AnthropicVersionValue = "2023-06-01";
// Заголовок ключа Anthropic API.
private const string AnthropicApiKeyHeader = "x-api-key";
private const double Temperature = 0.2;
private const int MaxResponseTokens = 8000;
private static readonly TimeSpan OpenAiCallTimeout = TimeSpan.FromSeconds(90);
private static readonly TimeSpan AnthropicCallTimeout = TimeSpan.FromSeconds(60);
private readonly HttpClient _httpClient;
private readonly TimeSpan _openAiCallTimeout;
private readonly TimeSpan _anthropicCallTimeout;
/// <summary>
/// Создаёт HTTP-клиент провайдеров с типовыми таймаутами
/// </summary>
/// <param name="httpClient">HttpClient (регистрируется в DI; таймаут управляется на попытку).</param>
public LlmHttpClient(HttpClient httpClient)
: this(httpClient, OpenAiCallTimeout, AnthropicCallTimeout)
{
}
// Создаёт HTTP-клиент с таймаутами для тестов (без реальной сети).
// httpClient: HttpClient над фейковым обработчиком.
// openAiCallTimeout: Таймаут OpenAI-совместимой попытки.
// anthropicCallTimeout: Таймаут Anthropic-попытки.
internal LlmHttpClient(
HttpClient httpClient,
TimeSpan openAiCallTimeout,
TimeSpan anthropicCallTimeout)
{
_httpClient = httpClient;
_openAiCallTimeout = openAiCallTimeout;
_anthropicCallTimeout = anthropicCallTimeout;
}
/// <summary>
/// Выполняет один вызов модели по выбранной схеме API.
/// </summary>
/// <param name="config">Конфиг провайдера (стиль — <c>ApiStyle</c>).</param>
/// <param name="systemPrompt">Системный промпт.</param>
/// <param name="userText">Пользовательское сообщение/контекст.</param>
/// <returns>Текст ответа и usage API-ответа (null при его отсутствии).</returns>
async Task<ProviderChatResult> IProviderClient.ChatAsync(
LlmConfig config,
string systemPrompt,
string userText,
CancellationToken cancellationToken)
{
TimeSpan timeout = config.IsAnthropic ? _anthropicCallTimeout : _openAiCallTimeout;
using var timeoutSource = CancellationTokenSource.CreateLinkedTokenSource(cancellationToken);
timeoutSource.CancelAfter(timeout);
try
{
using HttpRequestMessage request = config.IsAnthropic
? BuildAnthropicRequest(config, systemPrompt, userText)
: BuildOpenAiRequest(config, systemPrompt, userText);
using HttpResponseMessage response = await _httpClient
.SendAsync(request, timeoutSource.Token)
.ConfigureAwait(false);
return await ReadResponseAsync(response, config.IsAnthropic, timeoutSource.Token).ConfigureAwait(false);
}
catch (OperationCanceledException) when (!cancellationToken.IsCancellationRequested)
{
throw new LlmHttpException($"Таймаут вызова ИИ-провайдера: {timeout.TotalSeconds:0} с");
}
catch (HttpRequestException httpError)
{
throw new LlmHttpException($"Сетевая ошибка вызова ИИ-провайдера: {httpError.Message}", httpError);
}
}
private static HttpRequestMessage BuildOpenAiRequest(
LlmConfig config,
string systemPrompt,
string userText)
{
var request = new HttpRequestMessage(HttpMethod.Post, NormalizeBaseUrl(config.BaseUrl) + OpenAiCompletionsPath);
if (!string.IsNullOrEmpty(config.ApiKey))
{
request.Headers.Authorization = new AuthenticationHeaderValue("Bearer", config.ApiKey);
}
var body = new JsonObject
{
["model"] = config.Model,
["messages"] = new JsonArray(
ChatMessage("system", systemPrompt),
ChatMessage("user", userText)),
["temperature"] = Temperature,
["max_tokens"] = MaxResponseTokens,
};
request.Content = JsonBody(body);
return request;
}
private static HttpRequestMessage BuildAnthropicRequest(
LlmConfig config,
string systemPrompt,
string userText)
{
var request = new HttpRequestMessage(HttpMethod.Post, NormalizeBaseUrl(config.BaseUrl) + AnthropicMessagesPath);
request.Headers.TryAddWithoutValidation(AnthropicApiKeyHeader, config.ApiKey ?? string.Empty);
request.Headers.TryAddWithoutValidation(AnthropicVersionHeader, AnthropicVersionValue);
var body = new JsonObject
{
["model"] = config.Model,
["max_tokens"] = MaxResponseTokens,
["system"] = systemPrompt,
["messages"] = new JsonArray(ChatMessage("user", userText)),
};
request.Content = JsonBody(body);
return request;
}
// Читает ответ HTTP: статус ≠ 2xx или неожиданная форма — LlmHttpException (повод
// для ретрая); иначе текст ответа + usage из тела (см. парсеры стилей).
// response: Ответ провайдера.
// isAnthropic: Стиль ответа (Anthropic vs OpenAI-совместимый).
// cancellationToken: Токен отмены попытки.
private static async Task<ProviderChatResult> ReadResponseAsync(
HttpResponseMessage response,
bool isAnthropic,
CancellationToken cancellationToken)
{
if (!response.IsSuccessStatusCode)
{
throw new LlmHttpException(
$"ИИ-провайдер вернул HTTP {(int)response.StatusCode} {response.ReasonPhrase}");
}
string body = await response.Content.ReadAsStringAsync(cancellationToken).ConfigureAwait(false);
return isAnthropic ? ReadAnthropicBody(body) : ReadOpenAiBody(body);
}
private static ProviderChatResult ReadOpenAiBody(string body)
{
JsonObject? payload = ParseObjectOrThrow(body);
JsonArray? choices = payload["choices"] as JsonArray;
if (choices is null || choices.Count == 0)
{
// Тип сбоя без содержимого тела (замечание code-review: тело ответа наружу/в лог не уходит).
throw UnexpectedApiResponse("пустой или отсутствующий список choices");
}
// choices[i] — объект выбора {message, finish_reason, …}; текст — в message.content.
JsonObject? message = (choices[0] as JsonObject)?["message"] as JsonObject;
string? content = ReadStringField(message, "content");
if (string.IsNullOrEmpty(content) && !string.IsNullOrEmpty(ReadStringField(message, "reasoning_content")))
{
throw new LlmHttpException("Модель вернула только reasoning без ответа");
}
return new ProviderChatResult(content ?? string.Empty, ReadOpenAiUsage(payload["usage"]));
}
private static ProviderChatResult ReadAnthropicBody(string body)
{
JsonObject? payload = ParseObjectOrThrow(body);
var text = new StringBuilder();
if (payload["content"] is JsonArray contentBlocks)
{
foreach (JsonNode? blockNode in contentBlocks)
{
if (blockNode is JsonObject block)
{
text.Append(ReadStringField(block, "text"));
}
}
}
return new ProviderChatResult(text.ToString(), ReadAnthropicUsage(payload["usage"]));
}
// Возвращает usage OpenAI-совместимого ответа (prompt/completion/total_tokens) либо null.
// usageNode: Узел usage ответа.
private static ProviderUsage? ReadOpenAiUsage(JsonNode? usageNode)
{
if (usageNode is not JsonObject usage)
{
return null;
}
int? promptTokens = ReadIntField(usage, "prompt_tokens");
int? completionTokens = ReadIntField(usage, "completion_tokens");
int? totalTokens = ReadIntField(usage, "total_tokens");
return promptTokens is null || completionTokens is null || totalTokens is null
? null
: new ProviderUsage(promptTokens.Value, completionTokens.Value, totalTokens.Value);
}
// Возвращает usage Anthropic-ответа (input/output → total = сумма) либо null.
// usageNode: Узел usage ответа.
private static ProviderUsage? ReadAnthropicUsage(JsonNode? usageNode)
{
if (usageNode is not JsonObject usage)
{
return null;
}
int? inputTokens = ReadIntField(usage, "input_tokens");
int? outputTokens = ReadIntField(usage, "output_tokens");
return inputTokens is null || outputTokens is null
? null
: new ProviderUsage(inputTokens.Value, outputTokens.Value, inputTokens.Value + outputTokens.Value);
}
// Читает тело как JSON-объект; при не-JSON/не-объекте — исключение (неожиданный ответ API).
// body: Тело ответа.
private static JsonObject ParseObjectOrThrow(string body)
{
try
{
if (JsonNode.Parse(body) is JsonObject payload)
{
return payload;
}
}
catch (System.Text.Json.JsonException)
{
// Ниже — общий текст «неожиданный ответ API».
}
throw UnexpectedApiResponse("тело не является JSON-объектом");
}
private static LlmHttpException UnexpectedApiResponse(string failureKind)
=> new($"Неожиданный ответ ИИ-провайдера: {failureKind}");
// Создаёт сообщение чата {role, content} (формат обоих API).
// role: Роль сообщения.
// content: Текст сообщения.
private static JsonObject ChatMessage(string role, string content)
=> new()
{
["role"] = role,
["content"] = content,
};
// Создаёт JSON-содержимое запроса (application/json).
// body: Объект тела запроса.
private static StringContent JsonBody(JsonObject body)
=> new(body.ToJsonString(), Encoding.UTF8, "application/json");
// Читает строковое поле объекта (null — поля нет/не строка).
// parent: Объект ответа.
// fieldName: Имя поля.
private static string? ReadStringField(JsonObject? parent, string fieldName)
{
if (parent is null || parent[fieldName] is not JsonValue value)
{
return null;
}
return value.TryGetValue<string>(out string? result) ? result : null;
}
// Читает целочисленное поле объекта (null — поля нет/не число).
// parent: Объект ответа.
// fieldName: Имя поля.
private static int? ReadIntField(JsonObject parent, string fieldName)
{
if (parent[fieldName] is not JsonValue value || !value.TryGetValue<int>(out int result))
{
return null;
}
return result;
}
private static string NormalizeBaseUrl(string baseUrl) => baseUrl.TrimEnd('/');
}
@@ -0,0 +1,26 @@
namespace Deal.Ai.Llm;
/// <summary>
/// Ошибка одной HTTP-попытки вызова провайдера
/// </summary>
public sealed class LlmHttpException : Exception
{
/// <summary>
/// Создаёт ошибку HTTP-попытки с текстом причины.
/// </summary>
/// <param name="message">Краткое описание (без ключей и секретов).</param>
public LlmHttpException(string message)
: base(message)
{
}
/// <summary>
/// Создаёт ошибку HTTP-попытки с текстом причины и внутренним исключением.
/// </summary>
/// <param name="message">Краткое описание (без ключей и секретов).</param>
/// <param name="innerException">Исключение-источник (транспортная ошибка).</param>
public LlmHttpException(string message, Exception innerException)
: base(message, innerException)
{
}
}
@@ -0,0 +1,26 @@
namespace Deal.Ai.Llm;
/// <summary>
/// Политика ретраев вызова LLM
/// </summary>
public static class LlmRetryPolicy
{
/// <summary>
/// Число дополнительных попыток после первой
/// </summary>
public const int RetryCount = 2;
/// <summary>
/// Общее число попыток вызова.
/// </summary>
public const int AttemptCount = RetryCount + 1;
/// <summary>
/// Паузы между попытками
/// </summary>
public static readonly IReadOnlyList<TimeSpan> RetryDelays =
[
TimeSpan.FromMilliseconds(800),
TimeSpan.FromSeconds(2),
];
}
+9
View File
@@ -0,0 +1,9 @@
namespace Deal.Ai.Llm;
/// <summary>
/// Итоговая оценка токенов вызова для gRPC-ответа
/// </summary>
/// <param name="PromptTokens">Токены запроса (система + пользователь).</param>
/// <param name="CompletionTokens">Токены ответа модели.</param>
/// <param name="TotalTokens">Суммарно (по данным провайдера — как есть).</param>
public sealed record LlmUsage(int PromptTokens, int CompletionTokens, int TotalTokens);
@@ -0,0 +1,90 @@
using System.Text.Json.Nodes;
namespace Deal.Ai.Llm;
/// <summary>
/// Оркестратор вызова модели с ретраями и извлечением JSON
/// </summary>
public sealed class ProviderCaller
{
private readonly IProviderClient _client;
private readonly ILogger<ProviderCaller> _logger;
private readonly Func<TimeSpan, CancellationToken, Task> _retryDelayAsync;
/// <summary>
/// Создаёт оркестратор вызовов с заданной функцией паузы между попытками.
/// </summary>
/// <param name="client">HTTP-клиент одной попытки (в тестах — фейк).</param>
/// <param name="retryDelayAsync">Функция паузы между попытками (в тестах — мгновенная).</param>
/// <param name="logger">Логгер (ключи и текст промптов в логи не попадают).</param>
public ProviderCaller(
IProviderClient client,
Func<TimeSpan, CancellationToken, Task> retryDelayAsync,
ILogger<ProviderCaller> logger)
{
_client = client;
_retryDelayAsync = retryDelayAsync;
_logger = logger;
}
/// <summary>
/// Вызывает модель по системному и пользовательскому сообщениям и извлекает JSON-объект ответа.
/// </summary>
/// <param name="config">Конфиг активного провайдера.</param>
/// <param name="systemPrompt">Системный промпт (заполненный ядром или фиксированный сервиса).</param>
/// <param name="userText">Пользовательское сообщение/контекст.</param>
/// <returns>Извлечённый JSON-объект и итоговую оценку токенов.</returns>
/// <exception cref="LlmCallException">Все попытки исчерпаны (см. <see cref="LlmCallFailureKind"/>).</exception>
public async Task<LlmCallResult> ChatJsonAsync(
LlmConfig config,
string systemPrompt,
string userText,
CancellationToken cancellationToken)
{
string promptText = systemPrompt + userText;
string? lastModelText = null;
ProviderUsage? lastUsage = null;
LlmHttpException? lastHttpError = null;
for (int attempt = 0; attempt < LlmRetryPolicy.AttemptCount; attempt++)
{
try
{
ProviderChatResult result = await _client
.ChatAsync(config, systemPrompt, userText, cancellationToken)
.ConfigureAwait(false);
lastModelText = result.Text;
lastUsage = result.Usage;
JsonObject? json = JsonExtractor.TryExtractObject(result.Text);
if (json is not null)
{
return new LlmCallResult(json, TokenEstimator.Resolve(result.Usage, promptText, result.Text));
}
}
catch (LlmHttpException httpError)
{
lastHttpError = httpError;
}
if (attempt < LlmRetryPolicy.RetryCount)
{
await _retryDelayAsync(LlmRetryPolicy.RetryDelays[attempt], cancellationToken).ConfigureAwait(false);
}
}
if (lastModelText is not null)
{
LlmUsage usage = TokenEstimator.Resolve(lastUsage, promptText, lastModelText);
throw new LlmCallException(LlmCallFailureKind.AnswerNotJson, config.DisplayName, usage);
}
_logger.LogWarning(
"ИИ ({Provider}) не ответил корректно после {Attempts} попыток: {Error}",
config.DisplayName,
LlmRetryPolicy.AttemptCount,
lastHttpError?.Message ?? "пустой ответ");
throw new LlmCallException(LlmCallFailureKind.ProviderUnavailable, config.DisplayName);
}
}
@@ -0,0 +1,8 @@
namespace Deal.Ai.Llm;
/// <summary>
/// Результат одной успешной HTTP-попытки вызова модели
/// </summary>
/// <param name="Text">Текст ответа модели (может быть не-JSON — разбор в <see cref="JsonExtractor"/>).</param>
/// <param name="Usage">Usage из API-ответа провайдера; null — провайдер его не вернул (оценка по символам).</param>
public sealed record ProviderChatResult(string Text, ProviderUsage? Usage);
@@ -0,0 +1,9 @@
namespace Deal.Ai.Llm;
/// <summary>
/// Usage токенов из API-ответа провайдера.
/// </summary>
/// <param name="PromptTokens">Токены запроса (система + пользователь).</param>
/// <param name="CompletionTokens">Токены ответа модели.</param>
/// <param name="TotalTokens">Суммарно по данным провайдера (Anthropic: input + output).</param>
public sealed record ProviderUsage(int PromptTokens, int CompletionTokens, int TotalTokens);
@@ -0,0 +1,35 @@
namespace Deal.Ai.Llm;
/// <summary>
/// Оценка токенов вызова
/// </summary>
public static class TokenEstimator
{
private const int EstimatedCharsPerToken = 4;
/// <summary>
/// Сводит usage вызова
/// </summary>
/// <param name="providerUsage">Usage из API-ответа (null — провайдер его не вернул).</param>
/// <param name="promptText">Полный текст запроса (система + пользователь) для оценки.</param>
/// <param name="completionText">Текст ответа модели для оценки.</param>
public static LlmUsage Resolve(
ProviderUsage? providerUsage,
string promptText,
string completionText)
{
if (providerUsage is not null)
{
return new LlmUsage(providerUsage.PromptTokens, providerUsage.CompletionTokens, providerUsage.TotalTokens);
}
int promptTokens = EstimateTokens(promptText.Length);
int completionTokens = EstimateTokens(completionText.Length);
return new LlmUsage(promptTokens, completionTokens, promptTokens + completionTokens);
}
// Оценка токенов по числу символов: ≈ceil(chars/4).
// charCount: Число символов текста.
private static int EstimateTokens(int charCount)
=> (charCount + EstimatedCharsPerToken - 1) / EstimatedCharsPerToken;
}
+36
View File
@@ -0,0 +1,36 @@
//
using Deal.Ai;
using Deal.Grpc.Hosting.Interceptors;
using Deal.Grpc.Hosting.Models;
using Deal.Grpc.Hosting.Options;
using Deal.Grpc.Hosting.Services;
const int defaultGrpcPort = 5102;
const string aiProcessName = "ai";
int grpcPort = GrpcHostEnvironment.ResolveGrpcPort(defaultGrpcPort);
int metricsPort = DealMetricsHosting.ResolveMetricsPort(DealMetricsHosting.DefaultMetricsPort);
WebApplication app = AiServiceHost.Create(
grpcPort,
configureBuilder: builder =>
{
DealLogging.Configure(builder, aiProcessName);
DealMetricsHosting.AddDealMetrics(builder, metricsPort);
});
DealMetricsHosting.MapDealMetrics(app);
MtlsOptions mtlsOptions = MtlsOptions.FromConfiguration(app.Configuration);
// Fail-closed (замечание code-review): отсутствие/опечатка DEAL_MTLS_ENABLED не должны давать
// «тихого» plaintext в Production; Development (и прочие не-prod окружения) — как раньше.
GrpcHostEnvironment.RequireMtlsInProduction(mtlsOptions);
app.Logger.LogInformation(
"ai-service стартует: gRPC {Transport} 0.0.0.0:{Port} (health /grpc.health.v1.Health/Check)",
mtlsOptions.Enabled ? "mTLS (TLS + клиентский сертификат)" : "plaintext + service-token",
grpcPort);
await app.RunAsync();
+11
View File
@@ -0,0 +1,11 @@
<Project>
<PropertyGroup>
<TargetFramework>net10.0</TargetFramework>
<LangVersion>latest</LangVersion>
<Nullable>enable</Nullable>
<ImplicitUsings>enable</ImplicitUsings>
<TreatWarningsAsErrors>true</TreatWarningsAsErrors>
<AnalysisLevel>latest</AnalysisLevel>
<EnforceCodeStyleInBuild>true</EnforceCodeStyleInBuild>
</PropertyGroup>
</Project>
+48
View File
@@ -0,0 +1,48 @@
<Project Sdk="Microsoft.NET.Sdk">
<!--
Deal.Proto — общий проект кодогенерации .proto-контрактов этапа 6 (Ruling 1).
Компилирует все три контракта (telegram/ml/ai.proto) через Grpc.Tools с
генерацией и клиентской, и серверной стороны (GrpcServices="Both"): сборка
этого проекта — первый прогон кодогенерации и валидации .proto до создания
сервисных проектов (Task 2–4). Сгенерированные типы живут в пространствах
имён из option csharp_namespace (Deal.Grpc.Telegram/Deal.Grpc.Ml/Deal.Grpc.Ai)
и переиспользуются core и сервисами через ProjectReference.
Сборка: 0 warnings / 0 errors (TreatWarningsAsErrors), как остальные sln.
-->
<PropertyGroup>
<TargetFramework>net10.0</TargetFramework>
<LangVersion>latest</LangVersion>
<Nullable>enable</Nullable>
<ImplicitUsings>enable</ImplicitUsings>
<TreatWarningsAsErrors>true</TreatWarningsAsErrors>
<AnalysisLevel>latest</AnalysisLevel>
<EnforceCodeStyleInBuild>true</EnforceCodeStyleInBuild>
<AssemblyName>Deal.Proto</AssemblyName>
<RootNamespace>Deal.Proto</RootNamespace>
<GenerateDocumentationFile>false</GenerateDocumentationFile>
</PropertyGroup>
<ItemGroup>
<!-- Кодогенерация: protoc + плагин gRPC C# (только для сборки). -->
<PackageReference Include="Grpc.Tools" Version="2.83.0" PrivateAssets="All" />
<!-- Рантайм сгенерированных сообщений (MessageParser/ByteString и т.п.). -->
<PackageReference Include="Google.Protobuf" Version="3.35.1" />
<!-- Типы gRPC C#-стабов (Grpc.Core.*): нужны сгенерированному коду при
компиляции; транспорты (Grpc.Net.Client/Grpc.AspNetCore) подключают
проекты-потребители по месту (Ruling 1, список NuGet этапа). -->
<PackageReference Include="Grpc.Core.Api" Version="2.83.0" />
</ItemGroup>
<ItemGroup>
<!-- Контракты этапа 6; файлы лежат рядом с проектом (src/contracts). -->
<Protobuf Include="telegram.proto" GrpcServices="Both" />
<Protobuf Include="sources.proto" GrpcServices="Both" />
<Protobuf Include="ml.proto" GrpcServices="Both" />
<Protobuf Include="ai.proto" GrpcServices="Both" />
<Protobuf Include="storage.proto" GrpcServices="Both" />
</ItemGroup>
</Project>
+204
View File
@@ -0,0 +1,204 @@
# Контракты gRPC этапа 6 (`src/contracts`)
Контракты между ядром Deal и сервисами telegram/ml/ai (отдельные процессы).
Источники: дизайн-док §6.2 (L145–152), план «Дейл — Этап 6: Сервисы …»
(Task 1, Rulings 1/3/5/7), api-map §3.3/§3.7/§3.8/§4.8/§4.9/§4.10, прототип
`backend/app/services/*.py` и `mlservice/model.py`.
Контракты — **единственный «язык» между процессами** (Ruling 1): сервисы не
делят с ядром ничего, кроме этих `.proto` и NuGet.
| Файл | Пакет | `csharp_namespace` | Сервисы |
|---|---|---|---|
| `telegram.proto` | `deal.telegram.v1` | `Deal.Grpc.Telegram` | `TelegramService`, `IngressService` |
| `ml.proto` | `deal.ml.v1` | `Deal.Grpc.Ml` | `MlService` |
| `ai.proto` | `deal.ai.v1` | `Deal.Grpc.Ai` | `AiService` |
## Кодогенерация
- `Deal.Proto.csproj` — общий classlib: компилирует все три `.proto` через
`Grpc.Tools` (`<Protobuf Include=... GrpcServices="Both"/>`), т.е. генерирует
и клиент, и сервер каждого сервиса в одном проходе (неиспользуемая сторона
игнорируется потребителем). Сборка проекта = валидация `.proto` (protoc) и
первый прогон кодогенерации (Task 1); Task 2–4 подключают файлы к сервисам
`ProjectReference`-ом либо `<Protobuf Include="..\..\contracts\X.proto">`.
- Пакеты: `Grpc.Tools` (PrivateAssets), `Google.Protobuf`, `Grpc.Core.Api`.
Транспорты — по месту: `Grpc.AspNetCore` (серверы), `Grpc.Net.Client`/клиенты.
- Сгенерированные типы: `obj/…/{Telegram,TelegramGrpc,Ml,MlGrpc,Ai,AiGrpc}.cs`,
пространства имён из `option csharp_namespace`.
- Проекты-потребители: core (клиенты ML/AI; telegram-клиент-гейт + сервер
ингресса), telegram-service/ml-service/ai-service — добавляются в Task 2–4+.
## Metadata (все RPC, обязательны)
| Заголовок | Значение | Отказ |
|---|---|---|
| `tenant-id` | id тенанта (строка). **Единственный** источник принадлежности; полю в теле не доверяем | отсутствует → `UNAUTHENTICATED` (для ингресса core: `SetTenant` из metadata) |
| `service-token` | общий токен сервисов (env `DEAL_SERVICE_TOKEN`, общий в compose) | пустой/неверный → `UNAUTHENTICATED` |
Интерцептор `service-token` — общий шаблон в каждом процессе (Ruling 1/2);
каждый сервис дополнительно проверяет принадлежность по своей модели (сессия/
модель тенанта есть, иначе `NOT_FOUND`/`FAILED_PRECONDITION`).
## Коды ошибок (общие)
Ошибки домена — gRPC-статусы, `detail` = текст причины 1:1 с прототипом
(строки «Telegram не подключён», «Неверный код», «Код истёк — запросите новый»,
«Неверный облачный пароль», «ИИ (имя) не ответил корректно — …» и т.д.):
| Статус | Когда |
|---|---|
| `INVALID_ARGUMENT` | невалидный ввод/код/пароль/username, пустой текст |
| `NOT_FOUND` | диалог/сущность/сессия тенанта не найдены |
| `FAILED_PRECONDITION` | операция невозможна в текущей фазе (нет сессии и т.п.) |
| `RESOURCE_EXHAUSTED` | FloodWait Telegram (detail начинается с префикса `flood`) |
| `UNAVAILABLE` | недоступен Telegram/LLM-провайдер/хранилище модели (безопасный повтор/фолбэк) |
| `UNAUTHENTICATED` | неверный/отсутствующий `service-token` |
«Мягкие» сценарии НЕ являются ошибками RPC: Predict неготовой модели («не
уверен»), ReadForEval без истории (`ok=false, error="no_history"`), сброс с
`ok=false,error`, `filter` с решением pass/reason.
## Deadlines (клиент)
| Сфера | Рекомендация | Обоснование |
|---|---|---|
| telegram: GetStatus/SetMonitor/SetMonitorAll/Logout | 10 с | локальная сеть/статус |
| telegram: StartPhone/StartQr/SendCode/SendPassword/Search/GetInfo/ReadRecent/ReadForEval/Join/Leave | 60 с | сетевые операции Telegram (паузы анти-бана 2–4 с поиск) |
| telegram: RefreshDialogs/Backfill | 120 с | iter_dialogs 500; backfill 10 сообщ. × 1.5–3 с + 3–6 с/диалог |
| ingress: PushMessage/SyncDialogs/ReportStatus | 10 с | локальная сеть; упущенное догоняет realtime-sweep |
| ml: Predict | 5 с | локальная модель |
| ml: Status/Reset | 10 с | локально |
| ml: TrainBatch | 30 с | батч ≤100, 1 транзакция |
| ai: все RPC | 120 с | провайдер 90/60 с + ретраи 0.8/2 с |
---
## `telegram.proto`
Два сервиса: команды ядра → сервис (`TelegramService`) и поток сервис → ядро
(`IngressService`, gRPC-сервер в Deal.Api :5082, Ruling 7).
### Словари значений
- `phase`: `idle | phone | code | password | qr | ready` (status() L85).
- `kind`: `channel | group | forum | chat` (канон контракта; 1:1 `_kind_of`
L461466: broadcast → channel, megagroup/gigagroup/group → group, остальное →
chat; `forum` — отдельный флаг `is_forum` в GetInfo, в каталоге форум приходит
как group). Discovery-коды `channel/group/forum` ядро получает из kind+is_forum.
- `error`/`qr_url`/`account``optional` (presence): пустое = нет ошибки/URL.
### Маппинги на HTTP-контракт (заметка для T13/14, код не меняется)
Внутренний канон контракта `kind` — EN (`channel/group/forum/chat`). Граница
HTTP-эндпоинтов (api-map §4.8 L349, замороженный контракт фронта) НЕ 1:1:
- `GET /api/tg/dialogs``item.type` остаётся **русским** («канал»/«группа»/
«чат»), как в прототипе (`refresh_dialogs`/`list_dialogs`): на границе
эндпоинта каналов (T13/14) нужен обратный маппинг EN → RU
(channel→«канал», group/forum→«группа», chat→«чат»; forum в списке диалогов
не встречается — каталог приносит его как group).
- Discovery: `candidate.type` (`kind`) — **EN** (`channel/group/forum`), как в
прототипе (db.py L162166, `_kind_code`); маппинг на границе НЕ нужен.
### TelegramService (ядро — клиент, сервис — сервер)
| RPC | Запрос | Ответ | Ошибки / примечания |
|---|---|---|---|
| `GetStatus` | `GetStatusRequest` (пуст) | `GetStatusReply{phase,connected,listener,account,error?,qr_url?}` | нет сессии → FAILED_PRECONDITION «Telegram не подключён». live-поля для `GET /api/tg/status`; monitored/keysSet ядро считает само (Ruling 8) |
| `StartPhone` | `StartPhoneRequest{phone, api_id, api_hash}` | `StartPhoneReply{phase}` | ключи tgKeys передаёт ядро (Ruling 3); нет ключей → INVALID_ARGUMENT «Сначала сохраните…»; ответ фаза `code` |
| `StartQr` | `StartQrRequest{api_id, api_hash}` | `StartQrReply{phase, qr_url}` | фаза `qr` + url; уже авторизован → `ready`, url пуст |
| `SendCode` | `SendCodeRequest{code}` | `SendCodeReply{phase}` | «Неверный код»/«Код истёк…» → INVALID_ARGUMENT; 2FA → фаза `password` |
| `SendPassword` | `SendPasswordRequest{password}` | `SendPasswordReply{phase}` | «Неверный облачный пароль» → INVALID_ARGUMENT; ответ `ready` |
| `Logout` | `LogoutRequest` (пуст) | `LogoutReply{ok}` | отключение + удаление сессии тенанта |
| `RefreshDialogs` | `RefreshDialogsRequest` (пуст) | `RefreshDialogsReply{entries: DialogEntry[]}` | каталог диалогов; применять ядру через Ingress.SyncDialogs-семантику (`SyncFromTelegram`) |
| `SetMonitor` | `SetMonitorRequest{dialog_id, enabled}` | `SetMonitorReply{ok, enabled}` | зеркало monitored в сервисе; первый backfill запускает ядро |
| `SetMonitorAll` | `SetMonitorAllRequest{enabled}` | `SetMonitorAllReply{ok, count, enabled}` | count = диалогов в каталоге |
| `Backfill` | `BackfillRequest{dialog_id, force}` | `BackfillReply{processed}` | последние ~10 сообщений → поток PushMessage; паузы 1.53 с/сообщ. + mark-as-read; force = «Перечитать» |
| `ReadRecent` | `ReadRecentRequest{dialog_id, limit 1..50}` | `ReadRecentReply{messages: PreviewMessage[]}` | свежие из TG; lead и фолбэк на БД — в ядре |
| `Search` | `SearchRequest{query, limit}` | `SearchReply{results: DialogEntry[]}` | пауза анти-бана внутри сервиса; личные/ботов отсеивает ядро (Ruling 10) |
| `GetInfo` | `GetInfoRequest{dialog_id}` | `GetInfoReply{info: ChannelInfo}` | ChannelInfo{id,name,username,kind,hue,participants?,is_forum}; сбои full_chat не роняют RPC |
| `ReadForEval` | `ReadForEvalRequest{dialog_id, limit}` | `ReadForEvalReply{ok, error?, messages: EvalMessage[]}` | форумы — по темам; история скрыта → ok=false,error="no_history" (НЕ ошибка RPC) |
| `Join` | `JoinRequest{username}` | `JoinReply{ok}` | FloodWait → RESOURCE_EXHAUSTED (`flood`); ручной join вне квот |
| `Leave` | `LeaveRequest{dialog_id}` | `LeaveReply{ok}` | нет членства → NOT_FOUND |
Общие сообщения:
- `DialogEntry{id,name,username,kind,hue}` — каталог/поиск (id подписанный:
каналы `-100…`, группы `-…`, личные `+…`; hue — палитра DIALOG_HUES).
- `ChannelInfo` = DialogEntry + `participants?` + `is_forum`.
- `PreviewMessage{id(text), text, time(ms)}` — превью (api-map §4.8 L351; `id`
строкой: int-сообщения TG и фолбэк `m_<dialog>_<msg>`).
- `EvalMessage{id(int64), text, date_ms, topic_id?, topic_title?}` — выборка
оценки кандидата (`_discovery_message_item`).
### IngressService (сервис — клиент, ядро — сервер в Deal.Api, порт `GRPC_INGRESS_PORT` :5082)
| RPC | Запрос | Ответ | Примечания |
|---|---|---|---|
| `PushMessage` | `PushMessageRequest{dialog_id, channel_name, channel_handle, channel_hue, msg_id?, text, msg_at?}` | `PushMessageReply{accepted, duplicate}` | 1:1 QueuedMessage/demo-ingest: EnqueueAsync + превью в TgMessages; дубль dialog+msgId → duplicate=true, очередь не растёт; нет msg_at → ядро подставит now; hue считает сервис |
| `SyncDialogs` | `SyncDialogsRequest{entries: DialogEntry[]}` | `SyncDialogsReply{monitored_ids[]}` | ядро: SyncFromTelegram (autoMonitorNew/обновление/удаление); ответ — актуальный зеркальный список monitored сервиса |
| `ReportStatus` | `ReportStatusRequest{phase,connected,listener,account,error?,qr_url?}` | `ReportStatusReply{ok}` | ядро: KV tgStatus/tgAccount + SSE system_status/тосты на переходах фаз |
---
## `ml.proto`
`MlService` — пул инкрементальных наивно-байесовских моделей per-tenant
(файл `data/ml/<tenantId>.sqlite`). Поля 1:1 с `MlPredictResultDto`/
`MlServiceStatusDto` и model.py.
| RPC | Запрос | Ответ | Примечания |
|---|---|---|---|
| `Predict` | `PredictRequest{text}` | `PredictReply{take,label?,scores: map<string,double>,hits,ready,margin?,terms[],type?}` | «не уверен» при неготовой модели/пустом тексте — не ошибка; scores ≤5 лучших (round 3); margin адаптивный 0.9/0.7/0.5/0.35; terms ≤8; type — t:hire/t:order |
| `Status` | `StatusRequest` (пуст) | `StatusReply{ready,classes: map<string,double>,learned,eval: ModelEval}` | classes «label → вес» round 2; модель создаётся лениво |
| `Reset` | `ResetRequest` (пуст) | `ResetReply{ok, error?}` | очистка classes/terms/eval_log + пересоздание файла; ok=false — мягкая ошибка (ядро чистит ml_outbox только при ok) |
| `TrainBatch` | `TrainBatchRequest{items: TrainExample[]}` | `TrainBatchReply{learned}` | 1 транзакция + пакетные вставки терминов (= learn_batch); learned = применено примеров |
Сообщения:
- `TypeDecision{take,label("hire"|"order"),value("t:hire"|"t:order"),margin}`
решение о типе заявки.
- `ModelEval{count,correct,accuracy}` — окно самооценки (EVAL_WINDOW последних
подтверждённых решений).
- `TrainExample{text,label,delta}` — строка обучения (ml_outbox): delta 1.0
пользователь / −1.0 снять / 0.4–0.6 ИИ-правила.
Пороги и константы (Ruling 4): MIN_TOTAL 20, MIN_WINNER 6, MIN_WINNER_SPAM 4,
MIN_HITS 2, MARGIN 0.9, типы `t:*` с MIN_TYPE_WINNER 4 — живут в ml-service
(реализация Task 5/6), в контракт не входят.
---
## `ai.proto`
`AiService` — фасад LLM-провайдеров без БД (Ruling 5). Ядро передаёт в теле
каждого запроса заполненные промпты/контекст + конфиг активного провайдера
(`provider_config`); сервис возвращает ответ модели + оценку токенов.
| RPC | Запрос | Ответ | Примечания |
|---|---|---|---|
| `Filter` | `FilterRequest{prompt, text, provider_config}` | `FilterReply{pass, reason?, usage}` | prompt = заполненный aiFilterPrompt (ядро); «фильтр не применялся» обрабатывает ядро до вызова |
| `Classify` | `ClassifyRequest{system_prompt, user_context, provider_config}` | `ClassifyReply{ok, json?, usage}` | system_prompt = aiPrompt+cardPrompt, user_context = «Доски + примеры + Сообщение» (собирает ядро); json — сырой ответ модели строкой; строгий маппинг в карточку — ядро |
| `GenerateKeywords` | `GenerateKeywordsRequest{description, provider_config}` | `GenerateKeywordsReply{keywords[], usage}` | фикс. промпт (routes L3647); очистку `_clean_keywords` и мягкие ошибки делает ядро (Ruling 11) |
| `EvaluateFit` | `EvaluateFitRequest{text, description, keywords[], provider_config}` | `EvaluateFitReply{fit, reason?, usage}` | промпт discovery_eval L5054; ядро зовёт при aiEnabled, сбой → эвристика |
`provider_config` — конфиг активного провайдера на запрос (Ruling 5 «в теле
каждого запроса»): ядро собирает эффективный конфиг (настройка `aiConfigs`
тенанта хранит `{apiKey, baseUrl, model}` в camelCase, ключ шифруется AES-GCM;
`apiStyle` — из каталога `AiProviders`) и передаёт в теле; сервис настроек не
хранит. Форма — сообщение `ProviderConfig`:
| Поле | Обязательность | Описание |
|---|---|---|
| `provider_id` | да | Id провайдера (ключ `aiConfigs`/каталога: deepseek/openai/anthropic/ollama/lmstudio/custom…) |
| `base_url` | да | Эффективный базовый URL API (`aiConfigs.baseUrl` или дефолт каталога) |
| `api_key` | опц. | Ключ открытым текстом (расшифрован ядром); пуст у локальных провайдеров — заголовок не шлётся |
| `model` | да | Активная модель (`aiConfigs.model` или первая из каталога) |
| `api_style` | опц. | Стиль API: пуст — OpenAI-совместимый (`{base}/chat/completions`, Bearer); `"anthropic"` — Messages API (`{base}/v1/messages`, x-api-key + anthropic-version) |
Сообщения:
- `Usage{prompt, completion, total}` — оценка токенов в каждом reply (из usage
API-ответа; при отсутствии ≈chars/4; ядро копит в KV `aiTokenUsage`).
Ошибки: провайдер не ответил корректно после ретраев → `UNAVAILABLE` с detail
«ИИ (имя) не ответил корректно — повторите попытку через несколько секунд».
`ClassifyReply.ok=false` — ответ без разбираемого JSON (не RPC-ошибка); ядро
трактует как «не разобрано» и использует локальный путь.
+138
View File
@@ -0,0 +1,138 @@
//
// ядро передаёт в теле каждого запроса готовые (заполненные) промпты и/или
// текст + конфиг активного провайдера (ProviderConfig); сервис вызывает
// провайдера (OpenAI-совместимые POST {base}/chat/completions, Anthropic
// POST {base}/v1/messages; temperature 0.2, таймауты 90/60 с, retry 2 с
// паузами 0.8/2 с) и возвращает ответ + оценку токенов. Конфиг провайдера
// (id/base/model/apiKey/api_style) ядро кладёт в поле provider_config каждого
// запроса — сервис настроек тенанта не знает и не хранит.
//
// tenant-id — id тенанта (строка; учёт токенов в ядре по нему);
// service-token — общий токен сервисов (env DEAL_SERVICE_TOKEN); неверный/
// пустой → UNAUTHENTICATED.
//
// INVALID_ARGUMENT — невалидный запрос (пустой текст/промпт и т.п.);
// UNAVAILABLE — провайдер не ответил корректно после ретраев; detail =
// «ИИ (имя) не ответил корректно — повторите попытку через
// несколько секунд» (ядро падает в локальный разбор).
//
// Берётся из usage API-ответа провайдера; при отсутствии оценивается по
// символам (≈chars/4). Ядро копит значения в tenant-KV aiTokenUsage.
//
// Deadlines (клиент ядра): все RPC — 120 с (90 с провайдер + ретраи 0.8/2 с;
syntax = "proto3";
package deal.ai.v1;
option csharp_namespace = "Deal.Grpc.Ai";
service AiService {
// ядро шлёт заполненный aiFilterPrompt (fill_prompt делает ядро) и текст;
// решение {pass, reason}. Ветку «фильтр не применялся» (aiFilterEnabled/
// недоступность) обрабатывает ядро до вызова — сервис всегда отвечает.
rpc Filter(FilterRequest) returns (FilterReply);
// «Доски + примеры разметки + Сообщение»; сервис возвращает извлечённый
// ответ модели как json-строку (типовую схему задаёт промпт). Строгий
// clean_budget/build_contacts).
rpc Classify(ClassifyRequest) returns (ClassifyReply);
// Генерация ключевых слов для discovery-задачи по описанию (фикс. промпт
rpc GenerateKeywords(GenerateKeywordsRequest) returns (GenerateKeywordsReply);
// Оценка соответствия сообщения задаче поиска (промпт discovery_eval
// Ядро зовёт только при aiEnabled; сбой/не-JSON — фолбэк на эвристику.
rpc EvaluateFit(EvaluateFitRequest) returns (EvaluateFitReply);
}
// --- Запросы/ответы AiService ---
// aiConfigs и передаёт в теле каждого запроса; сервис не хранит настроек).
// api_style — из каталога AiProviders (Settings); HTTP-клиенту провайдера
// нужны baseUrl+model+apiKey для запроса и api_style для выбора схемы вызова
// (OpenAI-совместимые chat/completions vs Anthropic Messages API).
message ProviderConfig {
// Id провайдера (ключ aiConfigs / каталога AiProviders: deepseek, openai,
// anthropic, ollama, lmstudio, custom…).
string provider_id = 1;
// Эффективный базовый URL API (aiConfigs.baseUrl или дефолт каталога).
string base_url = 2;
// API-ключ открытым текстом (расшифрован ядром); пуст для локальных
// провайдеров (ollama/lmstudio) — заголовок авторизации не шлётся.
optional string api_key = 3;
// Активная модель (aiConfigs.model или первая из каталога провайдера).
string model = 4;
// Стиль API: пуст — OpenAI-совместимый (POST {base}/chat/completions,
// Bearer); "anthropic" — Messages API (POST {base}/v1/messages,
// x-api-key + anthropic-version).
optional string api_style = 5;
}
message FilterRequest {
// Заполненный промпт фильтра (настройка aiFilterPrompt с подстановкой
string prompt = 1;
string text = 2;
ProviderConfig provider_config = 3;
}
message FilterReply {
// True — сообщение проходит фильтр (не спам/реклама/служебное).
bool pass = 1;
// Причина отказа при pass=false (текст ветки filter_ai; пуст при пропуске).
optional string reason = 2;
Usage usage = 3;
}
message ClassifyRequest {
string system_prompt = 1;
// user-контекст: «Доски + примеры разметки + Новое сообщение» (собирает
string user_context = 2;
ProviderConfig provider_config = 3;
}
message ClassifyReply {
// True — модель вернула разбираемый JSON (ok=false — ответ без JSON после
// ретраев; ядро трактует как «не разобрано» и падает в локальный путь).
bool ok = 1;
// Сырой JSON-ответ модели (строкой; маппинг в карточку — в ядре).
optional string json = 2;
Usage usage = 3;
}
message GenerateKeywordsRequest {
string description = 1;
ProviderConfig provider_config = 2;
}
message GenerateKeywordsReply {
// Сгенерированные ключи (пустой список — модель не выделила ключи;
repeated string keywords = 1;
Usage usage = 2;
}
message EvaluateFitRequest {
// Текст сообщения для оценки (выборка кандидата; ядро ограничивает 4000).
string text = 1;
string description = 2;
repeated string keywords = 3;
ProviderConfig provider_config = 4;
}
message EvaluateFitReply {
// True — сообщение относится к сфере/задаче (JSON {"fit": 0|1}).
bool fit = 1;
// Краткая причина решения модели (пуст, если модель её не дала).
optional string reason = 2;
Usage usage = 3;
}
// из usage API-ответа, при отсутствии — по символам ≈chars/4).
message Usage {
// Токены запроса (system + user).
uint32 prompt = 1;
// Токены ответа модели.
uint32 completion = 2;
// Суммарно (prompt + completion; может отличаться от суммы при подсчёте
// провайдером — берём как есть).
uint32 total = 3;
}
+127
View File
@@ -0,0 +1,127 @@
//
// (MlPredictResultDto/MlServiceStatusDto/MlEvalDto/MlResetResultDto).
// Модель per-tenant: пул в ml-service, файл SQLite data/ml/<tenantId>.sqlite
//
// tenant-id — id тенанта (строка; модель тенанта — в пуле сервиса);
// service-token — общий токен сервисов (env DEAL_SERVICE_TOKEN); неверный/
// пустой → UNAUTHENTICATED.
//
// INVALID_ARGUMENT — невалидный запрос (пустой text и т.п.);
// UNAVAILABLE — хранилище модели недоступно (ядро отвечает «не уверен»,
//
// Семантика неготовой модели: Predict НЕ ошибка — модель без опыта отвечает
// фиксированным «не уверен»: take=false, label пуст, scores пуст, hits=0,
//
// Deadlines (клиент ядра): Predict — 5 с; Status/Reset — 10 с; TrainBatch — 30 с
// (батч ≤100 примеров, одна транзакция).
syntax = "proto3";
package deal.ml.v1;
option csharp_namespace = "Deal.Grpc.Ml";
service MlService {
// take/label/scores/hits/margin/terms/type осмысленны только при take=true;
// scores — до 5 лучших «класс → вес» (round 3), margin — адаптивный порог
// (0.9/0.7/0.5/0.35 после 0/60/150/400 примеров), terms — узнанные термины
// класса-победителя, type — решение о типе заявки (t:hire/t:order).
rpc Predict(PredictRequest) returns (PredictReply);
// classes — «label → вес» (round 2, по убыванию); eval — самооценка по окну
// последних подтверждённых решений (EVAL_WINDOW). Модель создаётся лениво
rpc Status(StatusRequest) returns (StatusReply);
// терминов и журнала самооценки + пересоздание файла. Ok=true; мягкая
// ошибка — Ok=false + error (ядро чистит свою ml_outbox только при успехе).
rpc Reset(ResetRequest) returns (ResetReply);
// пакетные вставки терминов; самооценка по действиям пользователя (delta=1,
// не t:*) до применения. Ответ — число применённых примеров.
rpc TrainBatch(TrainBatchRequest) returns (TrainBatchReply);
}
message PredictRequest {
// Текст сообщения (ядро передаёт уже обрезанный/нормализованный, как
string text = 1;
}
message PredictReply {
// True — модель уверена (take) и решение можно использовать без ИИ.
bool take = 1;
// Класс решения: id колонки канбана (b_…) или "spam"; пуст, если не уверена.
optional string label = 2;
// Веса классов: «label → вес» (до 5 лучших; пуст у неготовой модели).
map<string, double> scores = 3;
// Сколько терминов класса-победителя модель узнала в тексте.
int32 hits = 4;
// Модель обучена (набрала MIN_TOTAL/MIN_WINNER/MIN_WINNER_SPAM) и может
// принимать решения.
bool ready = 5;
// Порог уверенности решения (адаптивный margin, 2 знака); пуст — нет решения.
optional double margin = 6;
// Узнанные термины класса-победителя (подсказка структуры карточки, ≤8).
repeated string terms = 7;
// Решение о типе заявки (hire/order); пуст — модель тип не определила.
TypeDecision type = 8;
}
message TypeDecision {
// True — модель уверена в типе.
bool take = 1;
// Тип: "hire" | "order".
string label = 2;
// Внутренний класс ML: "t:hire" | "t:order" (не показывается UI).
string value = 3;
// Запас уверенности (margin, 2 знака).
double margin = 4;
}
message StatusRequest {}
message StatusReply {
// Модель готова принимать решения.
bool ready = 1;
// Классы модели: «label → вес» (round 2; пуст, пока нет обучения).
map<string, double> classes = 2;
// Всего примеров, на которых модель обучалась (сумма по классам).
int32 learned = 3;
// Самооценка модели по последним подтверждённым решениям.
ModelEval eval = 4;
}
message ModelEval {
// Решений в окне самооценки (последние EVAL_WINDOW).
int32 count = 1;
// Из них совпавших с действием пользователя.
int32 correct = 2;
// Доля верных (correct/count, 0..1; 0 при пустом окне).
double accuracy = 3;
}
message ResetRequest {}
message ResetReply {
// True — модель сброшена (и ядро очищает свою очередь обучения).
bool ok = 1;
// Текст ошибки при сбое сброса (пуст при успехе) — мягкая ошибка.
optional string error = 2;
}
message TrainBatchRequest {
repeated TrainExample items = 1;
}
// Один обучающий пример (строка ml_outbox ядра: text/label/delta).
message TrainExample {
// Текст примера (source_msg карточки или title).
string text = 1;
// Метка: id доски (b_…), "spam" либо тип "t:hire"/"t:order".
string label = 2;
// Вес сигнала: 1.0 — действие пользователя; −1.0 — снять метку;
double delta = 3;
}
message TrainBatchReply {
// Число применённых примеров (= len(items) при успехе).
int32 learned = 1;
}
+91
View File
@@ -0,0 +1,91 @@
//
// Контракт входящего потока источников: сервис-источник → ядро.
//
// Любой источник (telegram, whatsapp, avito, сайт, файл, excel) приводит свои
// данные к единому контракту SourceItem и шлёт их одним вызовом PushSource.
// Ядро не знает о природе источника: вид задаётся полем source.kind.
//
// tenant-id — id тенанта (metadata; единственный источник принадлежности);
// service-token — общий токен сервисов (env DEAL_SERVICE_TOKEN); неверный/
// пустой → UNAUTHENTICATED.
//
// Файлы вложений источник сам выгружает в сервис данных (storage.proto) и
// передаёт здесь ссылкой в content.data.
syntax = "proto3";
package deal.sources.v1;
option csharp_namespace = "Deal.Grpc.Sources";
service SourceIngressService {
// Запись источника → очередь конвейера ядра. Дубль (вид+оригинал+внешний id)
// уже в очереди — очередь не растёт (duplicate=true).
rpc PushSource(PushSourceRequest) returns (PushSourceReply);
}
message PushSourceRequest {
SourceRefProto source = 1;
SourceContentProto content = 2;
// True — вернуть из отсева: правила/устарелость/ИИ-фильтр пропускаются.
bool force = 3;
}
message SourceRefProto {
// Дискриминатор источника, задаёт владелец (telegram/file/local/...).
string kind = 1;
// Идентификатор записи в источнике (сообщение/строка/файл).
optional string external_id = 2;
// Подпись источника для интерфейса.
optional string display_name = 3;
// Ссылка на оригинал (url, deep-link, путь).
optional string origin_ref = 4;
optional string author = 5;
// Время получения записи, epoch-ms.
int64 received_at = 6;
// Прочие метаданные источника (в т.ч. цвет интерфейса — hue).
map<string, string> extra = 7;
}
message SourceContentProto {
optional string text = 1;
optional string html = 2;
optional string author = 3;
optional string subject = 4;
// Вложения: ссылки на объекты сервиса данных.
repeated DataRefProto data = 5;
// Ссылки, не являющиеся файлами.
repeated string links = 6;
repeated ContactRefProto contacts = 7;
map<string, string> extra = 8;
}
message DataRefProto {
string id = 1;
string ref = 2;
optional string kind = 3;
optional string mime_type = 4;
optional string file_name = 5;
optional int64 size = 6;
optional int32 width = 7;
optional int32 height = 8;
optional double duration_sec = 9;
optional string preview_ref = 10;
optional string caption = 11;
optional int32 order = 12;
map<string, string> meta = 13;
}
message ContactRefProto {
optional string kind = 1;
optional string name = 2;
optional string phone = 3;
optional string email = 4;
optional string url = 5;
}
message PushSourceReply {
// True — запись принята (пустой текст и пустой контент — accepted=false).
bool accepted = 1;
// True — дубль уже в очереди (очередь не выросла).
bool duplicate = 2;
}
+78
View File
@@ -0,0 +1,78 @@
//
// Контракт общего сервиса данных: загрузка/выгрузка/стат/удаление объектов вложений.
//
// tenant-id — id тенанта (metadata); объект хранится в пространстве тенанта;
// service-token — общий токен сервисов (env DEAL_SERVICE_TOKEN); неверный/пустой →
// UNAUTHENTICATED (интерцептор хоста).
//
// Тип объекта (image/video/audio/document/archive/other) определяет сервис —
// контракт типы вложений не задаёт.
syntax = "proto3";
package deal.storage.v1;
option csharp_namespace = "Deal.Grpc.Storage";
service StorageService {
// Поток: первое сообщение несёт meta, далее — data.
rpc Upload(stream UploadRequest) returns (UploadReply);
// Поток содержимого объекта частями.
rpc Download(DownloadRequest) returns (stream DownloadChunk);
// Дескриптор объекта (без содержимого).
rpc Stat(StatRequest) returns (StatReply);
// Удаление объекта (отсутствующий — успех).
rpc Delete(DeleteRequest) returns (DeleteReply);
}
message UploadRequest {
UploadMeta meta = 1;
bytes data = 2;
}
message UploadMeta {
string tenant_id = 1;
string file_name = 2;
string content_type = 3;
}
message UploadReply {
// Идентификатор объекта — ключ в хранилище.
string id = 1;
// Ссылка на скачивание/отображение.
string ref = 2;
// Тип, определённый сервисом (image/video/audio/document/archive/other).
string kind = 3;
string mime_type = 4;
string file_name = 5;
int64 size = 6;
optional int32 width = 7;
optional int32 height = 8;
optional double duration_sec = 9;
optional string preview_ref = 10;
}
message DownloadRequest {
string id = 1;
}
message DownloadChunk {
bytes data = 1;
}
message StatRequest {
string id = 1;
}
message StatReply {
bool found = 1;
UploadReply info = 2;
}
message DeleteRequest {
string id = 1;
}
message DeleteReply {}
+390
View File
@@ -0,0 +1,390 @@
//
// * TelegramService — команды ядра к telegram-service (порт-гейт ITelegramGateway):
// подключение/отключение аккаунта, каталог диалогов, мониторинг, backfill,
// превью, discovery-операции (поиск/инфо/чтение/вступление/выход);
// * IngressService — исходящий поток telegram-service → ядро: синхронизация
// каталога (SyncDialogs), статус аккаунта (ReportStatus).
// * Сообщения мониторящихся диалогов приходят в ядро generic-контрактом
// sources.proto (PushSource) — ядро не привязано к природе источника.
//
//
// tenant-id — id тенанта (строка; единственный источник принадлежности,
// полю в теле не доверяем);
// service-token — общий токен сервисов (env DEAL_SERVICE_TOKEN); неверный/
// пустой → UNAUTHENTICATED.
//
// INVALID_ARGUMENT — неверный ввод/неверный код/неверный пароль и т.п.;
// NOT_FOUND — диалог/сущность не найдены (нет сессии тенанта и т.п.);
// FAILED_PRECONDITION— операция невозможна в текущей фазе (нет сессии и т.п.);
// RESOURCE_EXHAUSTED — FloodWait Telegram (detail начинается с префикса "flood");
// UNAVAILABLE — недоступность Telegram/сети (безопасный повтор).
//
// Значения строк (канон контракта, .NET-код обеих сторон — новый):
// * kind: channel (канал) | group (группа/супергруппа) | forum (форум) |
// channel, megagroup/gigagroup/group → group, остальное → chat.
// Forum выставляется отдельным флагом is_forum (GetInfo); в
// каталоге (RefreshDialogs) форум приходит как group.
//
// * быстрые команды статуса/мониторинга — 10 с;
// * сетевые операции Telegram (QR/код/поиск/инфо/чтение/вступление) — 60 с;
// * Backfill/RefreshDialogs (паузы анти-бана 1.5–3 с/сообщение) — 120 с;
// * IngressService (локальная сеть core) — 10 с (сбой догоняет sweep).
syntax = "proto3";
package deal.telegram.v1;
option csharp_namespace = "Deal.Grpc.Telegram";
// ---------------------------------------------------------------------------
// TelegramService — команды ядра → telegram-service (клиентская сторона в core)
// ---------------------------------------------------------------------------
service TelegramService {
// само. Нет сессии — FAILED_PRECONDITION «Telegram не подключён».
rpc GetStatus(GetStatusRequest) returns (GetStatusReply);
// не заданы оператором» до вызова. Ответ: новая фаза ("code").
rpc StartPhone(StartPhoneRequest) returns (StartPhoneReply);
// если аккаунт уже авторизован — фаза "ready", qrUrl пуст.
rpc StartQr(StartQrRequest) returns (StartQrReply);
// «Код истёк — запросите новый» → INVALID_ARGUMENT. Нужен 2FA — фаза
// "password", иначе "ready". Фазы вне "code" → FAILED_PRECONDITION.
rpc SendCode(SendCodeRequest) returns (SendCodeReply);
// пароль» → INVALID_ARGUMENT. Ответ: фаза ("ready").
rpc SendPassword(SendPasswordRequest) returns (SendPasswordReply);
rpc Logout(LogoutRequest) returns (LogoutReply);
// актуальный список sources диалогов аккаунта (entries). Удаление/обновление
rpc RefreshDialogs(RefreshDialogsRequest) returns (RefreshDialogsReply);
// зеркало monitored в сервисе. Первый backfill (force=false) запускает ядро
// отдельным RPC Backfill. Ответ: ok/enabled.
rpc SetMonitor(SetMonitorRequest) returns (SetMonitorReply);
// ok/count/enabled (count — сколько диалогов в каталоге тенанта).
rpc SetMonitorAll(SetMonitorAllRequest) returns (SetMonitorAllReply);
// Перечитать последние ~10 сообщений диалога и отправить их в ядро потоком
// mark-as-read). force=true — «Перечитать» по кнопке даже для разобранных.
// Ответ: сколько сообщений отправлено (processed).
rpc Backfill(BackfillRequest) returns (BackfillReply);
// свежие из Telegram; признак lead и фолбэк на БД добавляет ядро
rpc ReadRecent(ReadRecentRequest) returns (ReadRecentReply);
// Исходное сообщение источника по id (remote-просмотр исходника карточки).
// found=false — сообщение не найдено/удалено (не ошибка RPC).
rpc ReadSource(ReadSourceRequest) returns (ReadSourceReply);
// Пауза анти-бана после поиска — внутри сервиса. Личные чаты/боты ядро
rpc Search(SearchRequest) returns (SearchReply);
// hue + participants и is_forum (полный чат). Сбои определения не роняют
// RPC: participants пуст, остальные поля — из entity/каталога.
rpc GetInfo(GetInfoRequest) returns (GetInfoReply);
// Выборка последних сообщений источника для оценки кандидата
// недоступна (приватный/закрытый источник) — ok=false, error="no_history",
// это НЕ ошибка RPC. limit ≥ 1; topic_id/topic_title заполнены для форумов.
rpc ReadForEval(ReadForEvalRequest) returns (ReadForEvalReply);
// FloodWait → RESOURCE_EXHAUSTED (detail с префиксом "flood").
rpc Join(JoinRequest) returns (JoinReply);
// диалога/членства.
rpc Leave(LeaveRequest) returns (LeaveReply);
}
// --- Запросы/ответы TelegramService ---
message GetStatusRequest {}
message GetStatusReply {
// Фаза входа: idle|phone|code|password|qr|ready.
string phase = 1;
// Клиент Telegram подключён и авторизован.
bool connected = 2;
// Жив ли realtime-listener (поток новых сообщений → PushMessage).
bool listener = 3;
// Аккаунт "@username" (для справки; источник истины — KV tgAccount по
string account = 4;
// Текст последней ошибки (null, если ошибки нет).
optional string error = 5;
// URL QR-входа (заполнен только при phase == "qr").
optional string qr_url = 6;
}
message StartPhoneRequest {
// Номер телефона в международном формате (как ввёл пользователь).
string phone = 1;
// api_id приложения Telegram (глобальные ключи, задаёт оператор; 5..9 цифр).
int32 api_id = 2;
// api_hash приложения Telegram (глобальные ключи, задаёт оператор).
string api_hash = 3;
}
message StartPhoneReply {
// Фаза после запроса кода ("code"); при ошибке — RPC-статус.
string phase = 1;
}
message StartQrRequest {
// api_id/api_hash приложения Telegram (см. StartPhoneRequest).
int32 api_id = 1;
string api_hash = 2;
}
message StartQrReply {
// Фаза после запуска: "qr" (ждём сканирования) либо "ready" (уже вошли).
string phase = 1;
// URL вида https://t.me/qr/... для отрисовки QR; пуст при phase != "qr".
string qr_url = 2;
}
message SendCodeRequest {
// Код из SMS/Telegram-сообщения.
string code = 1;
}
message SendCodeReply {
// Фаза после проверки кода: "password" (нужен 2FA) или "ready".
string phase = 1;
}
message SendPasswordRequest {
// Облачный пароль 2FA.
string password = 1;
}
message SendPasswordReply {
// Фаза после входа ("ready").
string phase = 1;
}
message LogoutRequest {}
message LogoutReply {
// True — аккаунт отключён, сессия тенанта удалена.
bool ok = 1;
}
message RefreshDialogsRequest {}
message RefreshDialogsReply {
// Актуальный каталог диалогов аккаунта (id/name/username/kind/hue).
repeated DialogEntry entries = 1;
}
message DialogEntry {
// Подписанный id диалога: каналы "-100…", группы "-…", личные "+…".
string id = 1;
// Отображаемое имя (title/first_name) или id, если имени нет.
string name = 2;
// Username (handle) источника; пуст, если нет публичного username.
string username = 3;
// Тип: channel|group|forum|chat (канон контракта, см. шапку файла).
string kind = 4;
// Цвет источника из палитры DIALOG_HUES (hex, "#rrggbb") — считает сервис.
string hue = 5;
}
message SetMonitorRequest {
// Id диалога каталога.
string dialog_id = 1;
// True — мониторить (сообщения → PushMessage в ядро), false — выключить.
bool enabled = 2;
}
message SetMonitorReply {
bool ok = 1;
// Зеркальное значение enabled (для ответов эндпоинтов {ok, enabled}).
bool enabled = 2;
}
message SetMonitorAllRequest {
// True — мониторить все диалоги каталога, false — снять мониторинг со всех.
bool enabled = 1;
}
message SetMonitorAllReply {
bool ok = 1;
int32 count = 2;
bool enabled = 3;
}
message BackfillRequest {
// Id диалога для перечитывания.
string dialog_id = 1;
// True — перечитать, даже если диалог уже разобран (кнопка «Перечитать»).
bool force = 2;
}
message BackfillReply {
// Сколько сообщений отправлено в ядро потоком PushMessage.
int32 processed = 1;
}
message ReadRecentRequest {
// Id диалога.
string dialog_id = 1;
int32 limit = 2;
}
message ReadRecentReply {
// Последние сообщения (от новых к старым). lead/фолбэк на БД — в ядре.
repeated PreviewMessage messages = 1;
}
message ReadSourceRequest {
// Id диалога-источника.
string dialog_id = 1;
// Id исходного сообщения в Telegram.
int64 msg_id = 2;
}
message ReadSourceReply {
// True — сообщение найдено и передано; false — нет (поля пусты).
bool found = 1;
// Текст исходного сообщения.
optional string text = 2;
// Время сообщения, epoch-ms.
optional int64 time = 3;
}
message PreviewMessage {
// Id сообщения в Telegram (int); фолбэк-сообщения из БД ядра — строки
// "m_<dialog>_<msg>", поэтому значение передаётся строкой.
string id = 1;
// Текст сообщения.
string text = 2;
// Время сообщения, epoch-ms.
int64 time = 3;
}
message SearchRequest {
// Поисковый запрос (ключ задачи discovery).
string query = 1;
int32 limit = 2;
}
message SearchReply {
// Найденные источники (каналы/группы; личные чаты/ботов отсеивает ядро).
repeated DialogEntry results = 1;
}
message GetInfoRequest {
// Id источника (подписанный; из каталога или результата поиска).
string dialog_id = 1;
}
message ChannelInfo {
string id = 1;
string name = 2;
string username = 3;
// Тип: channel|group|forum|chat.
string kind = 4;
string hue = 5;
// Число участников (full_chat); пусто — определить не удалось.
optional int32 participants = 6;
bool is_forum = 7;
}
message GetInfoReply {
ChannelInfo info = 1;
}
message ReadForEvalRequest {
// Id источника.
string dialog_id = 1;
int32 limit = 2;
}
message ReadForEvalReply {
// True — выборка получена; false — история недоступна без членства.
bool ok = 1;
// Код причины при ok=false: "no_history" (остальные поля пусты).
optional string error = 2;
// Сообщения выборки (форумы — по активным темам, topic_id/topic_title
// заполнены; для обычных источников — null).
repeated EvalMessage messages = 3;
}
message EvalMessage {
// Id сообщения в Telegram.
int64 id = 1;
// Текст сообщения (непустой; пустые тексты отбрасывает сервис).
string text = 2;
// Время сообщения, epoch-ms.
int64 date_ms = 3;
// Id темы форума (для обычных источников пусто).
optional int64 topic_id = 4;
// Название темы форума (для обычных источников пусто).
optional string topic_title = 5;
}
message JoinRequest {
// @username источника (без "@"; пусто → INVALID_ARGUMENT).
string username = 1;
}
message JoinReply {
bool ok = 1;
}
message LeaveRequest {
// Id диалога для выхода.
string dialog_id = 1;
}
message LeaveReply {
bool ok = 1;
}
// ---------------------------------------------------------------------------
// IngressService — исходящий поток telegram-service → ядро
// tenantId из metadata → собственный scope с ITenantContext.SetTenant)
// ---------------------------------------------------------------------------
service IngressService {
// Синхронизация каталога диалогов: ядро применяет entries (SyncFromTelegram:
// авто-мониторинг по autoMonitorNew, обновление, удаление отсутствующих) и
// отвечает актуальным списком monitored id — сервис держит зеркало
rpc SyncDialogs(SyncDialogsRequest) returns (SyncDialogsReply);
// Периодический/событийный статус аккаунта: ядро пишет KV tgStatus/tgAccount
rpc ReportStatus(ReportStatusRequest) returns (ReportStatusReply);
}
message SyncDialogsRequest {
// Актуальный каталог диалогов (собирает сервис, как refresh_dialogs).
repeated DialogEntry entries = 1;
}
message SyncDialogsReply {
// Id диалогов с включённым мониторингом (зеркало сервиса после синка).
repeated string monitored_ids = 1;
}
message ReportStatusRequest {
// Фаза: idle|phone|code|password|qr|ready.
string phase = 1;
// Клиент подключён и авторизован.
bool connected = 2;
// Realtime-listener жив.
bool listener = 3;
// Аккаунт "@username" (пуст после выхода) → KV tgAccount.
string account = 4;
// Текст ошибки (пуст, если нет) → KV tgStatus.error.
optional string error = 5;
// URL QR-входа при phase == "qr".
optional string qr_url = 6;
}
message ReportStatusReply {
// True — статус принят и сохранён ядром.
bool ok = 1;
}
@@ -0,0 +1,24 @@
using Deal.Modules.Tenants.Application.Services;
namespace Deal.Api.Configuration;
/// <summary>
/// Настройки httpOnly-куки сессии.
/// </summary>
public sealed class CookieOptions
{
/// <summary>
/// Имя куки.
/// </summary>
public string Name { get; set; } = "deal_session";
/// <summary>
/// Срок жизни куки в днях; совпадает со сроком жизни сессии.
/// </summary>
public int Days { get; set; } = AuthService.SessionLifetimeDays;
/// <summary>
/// Флаг Secure куки.
/// </summary>
public bool Secure { get; set; }
}
@@ -0,0 +1,17 @@
namespace Deal.Api.Configuration;
/// <summary>
/// Настройки авто-очистки данных
/// </summary>
public sealed class DataRetentionOptions
{
/// <summary>
/// Включён ли фоновый цикл авто-очистки
/// </summary>
public bool Enabled { get; set; } = true;
/// <summary>
/// Срок хранения записей аудита в днях
/// </summary>
public int AuditRetentionDays { get; set; } = 180;
}
@@ -0,0 +1,22 @@
namespace Deal.Api.Configuration;
/// <summary>
/// Настройки доверия прокси-заголовкам
/// </summary>
public sealed class ForwardedHeadersConfig
{
/// <summary>
/// Включена ли обработка прокси-заголовков
/// </summary>
public bool Enabled { get; set; }
/// <summary>
/// Доверенные прокси-адреса
/// </summary>
public string[] KnownProxies { get; set; } = [];
/// <summary>
/// Доверенные подсети прокси в CIDR
/// </summary>
public string[] KnownNetworks { get; set; } = [];
}
@@ -0,0 +1,24 @@
using Deal.Modules.Tenants.Application.Services;
namespace Deal.Api.Configuration;
/// <summary>
/// Настройки httpOnly-куки сессии оператора.
/// </summary>
public sealed class OperatorCookieOptions
{
/// <summary>
/// Имя куки.
/// </summary>
public string Name { get; set; } = "deal_operator_session";
/// <summary>
/// Срок жизни куки в часах; совпадает со сроком жизни сессии оператора.
/// </summary>
public int Hours { get; set; } = OperatorAuthService.SessionLifetimeHours;
/// <summary>
/// Флаг Secure куки.
/// </summary>
public bool Secure { get; set; }
}
@@ -0,0 +1,37 @@
namespace Deal.Api.Configuration;
/// <summary>
/// Настройки rate limiting и защиты входа
/// </summary>
public sealed class RateLimitOptions
{
/// <summary>
/// Включены ли rate limiting и LoginAttemptGuard.
/// </summary>
public bool Enabled { get; set; }
/// <summary>
/// Лимит политики "auth"
/// </summary>
public int AuthPerMinute { get; set; } = 10;
/// <summary>
/// Лимит политики "api"
/// </summary>
public int ApiPerMinute { get; set; } = 600;
/// <summary>
/// Лимит gRPC-ингресса
/// </summary>
public int GrpcIngressPerMinute { get; set; } = 600;
/// <summary>
/// Порог неудачных попыток входа ключа ip|login до блокировки
/// </summary>
public int LoginAttemptsMax { get; set; } = 5;
/// <summary>
/// Окно учёта неудачных попыток входа в минутах
/// </summary>
public int LoginAttemptWindowMin { get; set; } = 15;
}
@@ -0,0 +1,12 @@
namespace Deal.Api.Configuration;
/// <summary>
/// Настройки безопасности HTTP
/// </summary>
public sealed class SecurityOptions
{
/// <summary>
/// Явный allowlist Origin/CORS
/// </summary>
public string[] AllowedOrigins { get; set; } = [];
}
+57
View File
@@ -0,0 +1,57 @@
<Project Sdk="Microsoft.NET.Sdk.Web">
<ItemGroup>
<!-- Контракты этапа 6: Deal.Proto компилирует telegram/ml/ai.proto (GrpcServices="Both") — здесь нужна
серверная база Deal.Grpc.Telegram.IngressServiceBase (gRPC-ингресс, Ruling 1/7). -->
<ProjectReference Include="..\..\contracts\Deal.Proto.csproj" />
<ProjectReference Include="..\Deal.SharedKernel\Deal.SharedKernel.csproj" />
<ProjectReference Include="..\Deal.Contracts\Deal.Contracts.csproj" />
<ProjectReference Include="..\Deal.Infrastructure\Deal.Infrastructure.csproj" />
<ProjectReference Include="..\Deal.Modules.Settings\Deal.Modules.Settings.csproj" />
<ProjectReference Include="..\Deal.Modules.Tenants\Deal.Modules.Tenants.csproj" />
<ProjectReference Include="..\Deal.Modules.Kanban\Deal.Modules.Kanban.csproj" />
<ProjectReference Include="..\Deal.Modules.Pipeline\Deal.Modules.Pipeline.csproj" />
<ProjectReference Include="..\Deal.Modules.Telegram\Deal.Modules.Telegram.csproj" />
</ItemGroup>
<ItemGroup>
<!-- Структурированные логи Serilog (Ruling 7, план Task 14): JSON-консоль + rolling-файл
data/logs/deal-core-*.json; конфигурация — Deal.Api/Logging/DealLogging.cs (вызов из Program.cs).
Пакет тянет консоль/файл/compact-формат транзитивно. -->
<PackageReference Include="Serilog.AspNetCore" Version="10.0.0" />
</ItemGroup>
<ItemGroup>
<!-- gRPC-сервер ASP.NET Core (второй Kestrel-endpoint HTTP/2, план Task 12, Ruling 1/7). -->
<PackageReference Include="Grpc.AspNetCore" Version="2.83.0" />
<!-- Стандартный gRPC-health ингресса (план Task 20, Ruling 12): healthcheck контейнера core
в docker compose; grpc.health.v1.Health токеном не проверяется (см. IngressServiceTokenInterceptor). -->
<PackageReference Include="Grpc.AspNetCore.HealthChecks" Version="2.83.0" />
<PackageReference Include="Microsoft.EntityFrameworkCore.Design" Version="10.0.11">
<IncludeAssets>runtime; build; native; contentfiles; analyzers; buildtransitive</IncludeAssets>
<PrivateAssets>all</PrivateAssets>
</PackageReference>
<!-- SVG QR-кода /api/tg/qr-image (план Task 14/Ruling 8): генерация без внешних растровых зависимостей. -->
<PackageReference Include="Net.Codecrete.QrCodeGenerator" Version="2.0.6" />
</ItemGroup>
<ItemGroup>
<!-- Метрики OpenTelemetry → Prometheus (этап 12, пакет A): хостинг OTel, инструментация входящих
ASP.NET Core-запросов, исходящих HTTP-клиентов и экспортёр /metrics; GrpcNetClient — трейс-
инструментация исходящих gRPC-вызовов (метрик в ней нет; держим для будущего трейсинга).
Версии — 1.17.x (Prometheus-экспортёр и gRPC-клиент только pre-release-линией; остальные —
1.17.0 stable). Настройка — Deal.Api/Observability/DealMetricsHosting.cs. -->
<PackageReference Include="OpenTelemetry.Extensions.Hosting" Version="1.17.0" />
<PackageReference Include="OpenTelemetry.Exporter.Prometheus.AspNetCore" Version="1.17.0-beta.1" />
<PackageReference Include="OpenTelemetry.Instrumentation.AspNetCore" Version="1.17.0" />
<PackageReference Include="OpenTelemetry.Instrumentation.Http" Version="1.17.0" />
<PackageReference Include="OpenTelemetry.Instrumentation.GrpcNetClient" Version="1.17.0-beta.1" />
</ItemGroup>
<PropertyGroup>
<TargetFramework>net10.0</TargetFramework>
<Nullable>enable</Nullable>
<ImplicitUsings>enable</ImplicitUsings>
</PropertyGroup>
</Project>
+43
View File
@@ -0,0 +1,43 @@
# deal-api (core): HTTP-портал :5080 + gRPC-ингресс telegram-service :5082 (план Task 20; Ruling 12).
#
# КОНТЕКСТ СБОРКИ — корень репозитория: Deal.Api ссылается на проекты всего src/core (модули,
# Infrastructure, SharedKernel/Contracts) и на src/contracts/Deal.Proto.csproj (кодогенерация .proto,
# Task 1). Запуск из корня: docker build -f src/core/Deal.Api/Dockerfile .
# Порт HTTP — env ASPNETCORE_URLS; порт ингресса — env GRPC_INGRESS_PORT (Program.cs), в compose.dev.yml 5082.
#
# Примечание о кэше слоёв: restore-слой копирует весь src/core (csproj-файлы отдельных проектов не
# вычленяются — у Deal.Api ~10 ProjectReference внутри каталога; для dev-compose это приемлемо).
# .dockerignore исключает **/bin и **/obj из контекста сборки.
# --- Этап сборки: restore + publish ---
FROM mcr.microsoft.com/dotnet/sdk:10.0 AS build
WORKDIR /repo
COPY src/contracts/ src/contracts/
COPY src/core/ src/core/
RUN dotnet restore src/core/Deal.Api/Deal.Api.csproj
RUN dotnet publish src/core/Deal.Api/Deal.Api.csproj -c Release -o /app/publish
# --- Runtime-этап ---
FROM mcr.microsoft.com/dotnet/aspnet:10.0 AS final
WORKDIR /app
EXPOSE 5080 5082
COPY --from=build /app/publish .
# grpc_health_probe — healthcheck контейнера (Ruling 12): gRPC-health ингресса (:5082) освобождён
# от service-token (см. IngressServiceTokenInterceptor), поэтому проба идёт без metadata.
COPY --from=ghcr.io/grpc-ecosystem/grpc-health-probe:v0.4.35 /ko-app/grpc-health-probe /bin/grpc_health_probe
# data/encryption.key (шифрование секретов) и LocalFileStorage data/attachments живут под ContentRoot
# (/app/data); каталог монтируется volume-ом deal_api_data из compose.dev.yml. В полном dev-стеке файлы
# идут в MinIO (Storage__Minio__* env, см. compose.dev.yml) — volume остаётся для ключа шифрования.
# Non-root: процесс работает пользователем deal (UID 10001); /app/data — каталог данных (volume).
# HOME=/tmp — рабочий каталог для временных/DP-файлов (совместимо с read_only root FS + tmpfs /tmp).
RUN useradd --uid 10001 --shell /usr/sbin/nologin --no-create-home deal \
&& mkdir -p /app/data \
&& chown -R deal:deal /app/data
ENV HOME=/tmp
USER deal
ENTRYPOINT ["dotnet", "Deal.Api.dll"]
@@ -0,0 +1,16 @@
using Deal.Modules.Kanban.Application.Models;
namespace Deal.Api.Dtos;
/// <summary>
/// Ответ POST /api/admin/tick — форма {storage, reminders, pipeline, queue}.
/// </summary>
/// <param name="Storage">Статистика тика правил хранения (включая purgedRejected — очистку отсева 3 суток).</param>
/// <param name="Reminders">«Выстрелившие» напоминания {id,title,containerId} — список SSE reminder_due тика.</param>
/// <param name="Pipeline">Счётчики pump: словарь ключей; пуст, если pump не дал результата.</param>
/// <param name="Queue">Строк очереди входящих после прохода pump (queue_len).</param>
public sealed record AdminTickResultDto(
StorageTickStatsDto Storage,
IReadOnlyList<CardReminderDueDto> Reminders,
IReadOnlyDictionary<string, int> Pipeline,
int Queue);
@@ -0,0 +1,153 @@
using System.Text.Json;
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Settings.Application.Abstractions;
using Deal.Modules.Settings.Application.Models;
namespace Deal.Api.Endpoints;
/// <summary>
/// Эндпоинт проверки подключения AI-провайдера
/// </summary>
public static class AiCheckEndpoint
{
private const string ApiGroupPrefix = "/api";
// Путь проверки подключения AI-провайдера.
private const string AiCheckPath = "/ai/check";
private const string OpenApiTag = "settings";
/// <summary>
/// Регистрирует POST /api/ai/check.
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapAiCheckEndpoint(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(ApiGroupPrefix).WithTags(OpenApiTag);
group.MapPost(AiCheckPath, CheckAsync);
return app;
}
// POST /api/ai/check: проверка соединения с активным AI-провайдером тенанта.
private static async Task<IResult> CheckAsync(HttpContext context, CancellationToken ct)
{
if (context.GetCurrentUser() is null)
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
// Резолв после 401-гейта: ISettingsStore — scoped на TenantDbContext (tenant-контекст запроса).
ISettingsStore store = context.RequestServices.GetRequiredService<ISettingsStore>();
ISecretCipher secretCipher = context.RequestServices.GetRequiredService<ISecretCipher>();
IAiConnectionChecker checker = context.RequestServices.GetRequiredService<IAiConnectionChecker>();
AiCheckRequest checkRequest = await BuildActiveCheckRequestAsync(store, secretCipher, ct);
AiCheckResultDto result = await checker.CheckAsync(checkRequest, ct);
return Results.Ok(result);
}
private static async Task<AiCheckRequest> BuildActiveCheckRequestAsync(
ISettingsStore store,
ISecretCipher secretCipher,
CancellationToken ct)
{
string providerId = await ReadActiveProviderIdAsync(store, ct);
AiProviderDefinition? meta = AiProviders.All.FirstOrDefault(provider => provider.Id == providerId);
// Неизвестный id (ручное вмешательство в БД — PATCH-гейт SettingsService не даёт сохранить):
// HTTP не выполняется — ответит SSRF-гейт checker (allowlist).
if (meta is null)
{
return new AiCheckRequest(providerId, string.Empty, string.Empty, string.Empty, IsLocal: false, ApiStyle: null);
}
AiConfigSetting config = await ReadEffectiveConfigAsync(store, providerId, ct);
string apiKey = secretCipher.Decrypt(config.ApiKey);
string baseUrl = string.IsNullOrEmpty(config.BaseUrl) ? meta.Base : config.BaseUrl;
string model = string.IsNullOrEmpty(config.Model)
? meta.Models.FirstOrDefault() ?? string.Empty
: config.Model;
return new AiCheckRequest(providerId, baseUrl, model, apiKey, meta.Local, meta.ApiStyle);
}
// Читает активный провайдер: сохранённый aiProvider или дефолт (повреждённое значение — дефолт).
// store: KV-хранилище настроек тенанта.
// ct: Токен отмены.
// Возвращает: id провайдера.
private static async Task<string> ReadActiveProviderIdAsync(ISettingsStore store, CancellationToken ct)
{
SettingValue? row = await store.GetAsync(SettingsKeys.AiProvider, ct);
if (row is null)
{
return SettingsDefaults.AiProvider;
}
try
{
using JsonDocument document = JsonDocument.Parse(row.ValueJson);
if (document.RootElement.ValueKind == JsonValueKind.String)
{
return document.RootElement.GetString() ?? SettingsDefaults.AiProvider;
}
}
catch (JsonException)
{
// Повреждённая строка — дефолт (мягкая семантика, как в SettingsService).
}
return SettingsDefaults.AiProvider;
}
// Эффективный конфиг провайдера: дефолт SettingsDefaults, перекрытый сохранённым aiConfigs.
// store: KV-хранилище настроек тенанта.
// providerId: Активный провайдер (id из каталога).
// ct: Токен отмены.
// Возвращает: Конфиг {apiKey, baseUrl, model}; повреждённая строка aiConfigs — дефолт.
private static async Task<AiConfigSetting> ReadEffectiveConfigAsync(
ISettingsStore store,
string providerId,
CancellationToken ct)
{
AiConfigSetting defaults = SettingsDefaults.AiConfigs[providerId];
SettingValue? row = await store.GetAsync(SettingsKeys.AiConfigs, ct);
if (row is null)
{
return defaults;
}
try
{
using JsonDocument document = JsonDocument.Parse(row.ValueJson);
JsonElement root = document.RootElement;
if (root.ValueKind == JsonValueKind.Object
&& root.TryGetProperty(providerId, out JsonElement entry)
&& entry.ValueKind == JsonValueKind.Object)
{
return new AiConfigSetting(
ApiKey: ReadField(entry, "apiKey") ?? defaults.ApiKey,
BaseUrl: ReadField(entry, "baseUrl") ?? defaults.BaseUrl,
Model: ReadField(entry, "model") ?? defaults.Model);
}
}
catch (JsonException)
{
// Повреждённая строка — дефолт (не роняем проверку).
}
return defaults;
}
// Читает строковое поле объекта конфигурации (имена полей camelCase, как пишет SettingsService).
// entry: JSON-объект конфигурации провайдера.
// field: Имя поля (apiKey/baseUrl/model).
// Возвращает: Значение или null, если поле отсутствует/не строка.
private static string? ReadField(JsonElement entry, string field)
{
return entry.TryGetProperty(field, out JsonElement value) && value.ValueKind == JsonValueKind.String
? value.GetString()
: null;
}
}
@@ -0,0 +1,73 @@
using Deal.Api.Events;
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Contracts.Integrations.Abstractions;
using Deal.Contracts.Integrations.Models;
namespace Deal.Api.Endpoints;
/// <summary>
/// Эндпоинты ИИ-предложений
/// </summary>
public static class AiSuggestEndpoints
{
private const string AiGroupPrefix = "/api/ai";
private const string SuggestColumnsPath = "/suggest-columns";
private const string SuggestKeywordsPath = "/suggest-keywords";
private const string OpenApiTag = "dashboard";
private const string ToastEventType = "toast";
private const string SuggestToastTextFormat = "ИИ предложил колонок: {0} — откройте и решите";
private const string SparklesIcon = "sparkles";
/// <summary>
/// Регистрирует POST /api/ai/suggest-columns и POST /api/ai/suggest-keywords.
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapAiSuggestEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(AiGroupPrefix).WithTags(OpenApiTag);
group.MapPost(SuggestColumnsPath, SuggestColumnsAsync);
group.MapPost(SuggestKeywordsPath, SuggestKeywordsAsync);
return app;
}
private static async Task<IResult> SuggestColumnsAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
IColumnSuggester suggester = context.RequestServices.GetRequiredService<IColumnSuggester>();
SuggestColumnsResultDto result = await suggester.SuggestColumnsAsync(ct);
if (result.Ok)
{
SseBroker broker = context.RequestServices.GetRequiredService<SseBroker>();
broker.Publish(
context.GetCurrentUser()!.TenantId,
ToastEventType,
new { text = string.Format(SuggestToastTextFormat, result.Created), icon = SparklesIcon });
}
return Results.Ok(result);
}
private static async Task<IResult> SuggestKeywordsAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
IColumnSuggester suggester = context.RequestServices.GetRequiredService<IColumnSuggester>();
SuggestKeywordsResultDto result = await suggester.SuggestKeywordsAsync(ct);
return Results.Ok(result);
}
}
@@ -0,0 +1,193 @@
using Deal.Api.Extensions;
using Deal.Api.Middleware;
using Deal.Api.Models;
using Deal.Api.Services;
using Deal.Modules.Tenants.Application.Models;
using Deal.Modules.Tenants.Application.Services;
using Microsoft.Extensions.Options;
// Имя конфигурационного типа совпадает с Microsoft.AspNetCore.Http.CookieOptions — фиксируем алиасом.
using CookieOptions = Deal.Api.Configuration.CookieOptions;
namespace Deal.Api.Endpoints;
/// <summary>
/// HTTP-эндпоинты аутентификации
/// </summary>
public static class AuthEndpoints
{
private const string InvalidCredentialsDetail = "Неверный логин или пароль";
private const string WrongOldPasswordDetail = "Текущий пароль неверен";
private const string PasswordTooShortDetail = "Пароль слишком короткий (минимум 8 символов)";
private const string TenantSuspendedDetail = "Учётная запись приостановлена. Обратитесь к оператору";
private const string AuthGroupPrefix = "/api/auth";
private const string AuthOpenApiTag = "auth";
/// <summary>
/// Регистрирует группу /api/auth
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapAuthEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(AuthGroupPrefix).WithTags(AuthOpenApiTag);
group.MapPost("/login", LoginAsync).RequireRateLimiting(RateLimitPolicies.AuthPolicy);
group.MapPost("/logout", LogoutAsync);
group.MapGet("/me", MeAsync);
group.MapPost("/change-password", ChangePasswordAsync);
return app;
}
private static async Task<IResult> LoginAsync(
LoginRequest body,
AuthService authService,
AuditService auditService,
IOptions<CookieOptions> cookieOptions,
HttpContext context,
CancellationToken ct,
LoginAttemptGuard loginAttemptGuard,
SuspiciousActivityReporter suspicious)
{
string? attemptedLogin = NormalizeLogin(body.Login);
if (await loginAttemptGuard.IsBlockedAsync(ClientIp(context), attemptedLogin, ct))
{
// Событие подозрительной активности: серия неудачных попыток входа → блокировка ключа.
suspicious.Report(SuspiciousActivityReporter.LoginBlockedKind, ClientIp(context));
return EndpointResults.TooManyRequests(LoginAttemptGuard.BlockedDetail);
}
var result = await authService.LoginAsync(body.Login, body.Password, ct);
if (result.Error == LoginResultDto.ErrorTenantSuspended)
{
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.TenantLoginFailed,
AuditActorTypes.Tenant,
ActorId: result.UserId,
TenantId: result.TenantId,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { login = NormalizeLogin(body.Login) })), ct);
return EndpointResults.Forbidden(TenantSuspendedDetail);
}
if (result.Login is null || result.Token is null)
{
if (attemptedLogin is not null)
{
await loginAttemptGuard.RecordFailureAsync(ClientIp(context), attemptedLogin, ct);
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.TenantLoginFailed,
AuditActorTypes.Tenant,
ActorId: null,
TenantId: null,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { login = attemptedLogin })), ct);
}
return EndpointResults.Unauthorized(InvalidCredentialsDetail);
}
await loginAttemptGuard.ResetAsync(ClientIp(context), result.Login, ct);
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.TenantLoginOk,
AuditActorTypes.Tenant,
ActorId: result.UserId,
TenantId: result.TenantId,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { login = result.Login })), ct);
SessionCookieWriter.Append(context, cookieOptions.Value, result.Token);
return Results.Ok(new { ok = true, login = result.Login });
}
private static async Task<IResult> LogoutAsync(
AuthService authService,
AuditService auditService,
IOptions<CookieOptions> cookieOptions,
HttpContext context,
CancellationToken ct)
{
string cookieName = cookieOptions.Value.Name;
string? rawToken = context.Request.Cookies[cookieName];
// Пользователь разрешённой сессии — до её удаления (SessionMiddleware наполнил Items на старте запроса).
CurrentUser? user = context.GetCurrentUser();
var logout = await authService.LogoutAsync(rawToken, ct);
if (logout is not null)
{
// Актор — оператор, начавший impersonation (маркер сессии); тенант — для фильтра TenantId.
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.ImpersonationStopped,
AuditActorTypes.Operator,
ActorId: logout.OperatorId,
TenantId: logout.TenantId,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { login = logout.Login })), ct);
}
if (user is not null)
{
await AuditAppender.AppendTenantAsync(context, AuditEvents.TenantLogout, new { login = user.Login }, ct);
}
context.Response.Cookies.Delete(cookieName);
return Results.Ok(new { ok = true });
}
// GET /api/auth/me: проверка живой сессии.
private static IResult MeAsync(HttpContext context)
{
var user = context.GetCurrentUser();
if (user is null)
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
return Results.Ok(new { login = user.Login, ok = true });
}
// POST /api/auth/change-password: смена пароля и перевыпуск куки (свежая сессия).
private static async Task<IResult> ChangePasswordAsync(
ChangePasswordRequest body,
AuthService authService,
IOptions<CookieOptions> cookieOptions,
HttpContext context,
CancellationToken ct)
{
var user = context.GetCurrentUser();
if (user is null)
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
var result = await authService.ChangePasswordAsync(user.Login, body.OldPassword, body.NewPassword, ct);
if (!result.Ok || result.NewToken is null)
{
string detail = result.Error == ChangePasswordResultDto.ErrorTooShort
? PasswordTooShortDetail
: WrongOldPasswordDetail;
return EndpointResults.BadRequest(detail);
}
// Старые сессии удалены внутри сервиса; выдаём клиенту свежую куку.
SessionCookieWriter.Append(context, cookieOptions.Value, result.NewToken);
return Results.Ok(new { ok = true });
}
// Нормализованная попытка логина для аудита (нижний регистр/обрезка, как AuthService); null — писать нечего.
// login: Логин из тела запроса.
// Возвращает: Нормализованный логин или null при пустом/пробельном входе.
private static string? NormalizeLogin(string? login)
{
string? normalized = login?.Trim().ToLowerInvariant();
return string.IsNullOrEmpty(normalized) ? null : normalized;
}
// IP-адрес клиента для аудита (без порта; null, если недоступен).
// context: Контекст запроса.
// Возвращает: Строковое представление IP или null.
private static string? ClientIp(HttpContext context) => context.Connection.RemoteIpAddress?.ToString();
}
@@ -0,0 +1,484 @@
using System.Text.Json;
using Deal.Api.Endpoints.RequestModels;
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Contracts.Integrations.Abstractions;
using Deal.Contracts.Integrations.Models;
using Deal.Modules.Cards.Application.Sources;
using Deal.Modules.Kanban.Application.Models;
using Deal.Modules.Kanban.Application.Services;
using Deal.Modules.Tenants.Application.Models;
namespace Deal.Api.Endpoints;
/// <summary>
/// Детальные операции карточки
/// </summary>
public static class CardDetailsEndpoints
{
// Префикс группы (общий с CardsEndpoints).
private const string CardsGroupPrefix = "/api/cards";
// Статический сегмент «взять в работу» (регистрируется до /{cardId}).
private const string TakePath = "/take";
// Статический сегмент очистки «Отклонено» (регистрируется до /{cardId}).
private const string ClearRejectedPath = "/clear-rejected";
// Параметрический сегмент карточки (PATCH /{cardId}).
private const string CardIdPath = "/{cardId}";
// Вложенный путь добавления ссылки.
private const string LinksPath = "/{cardId}/links";
// Вложенный путь удаления ссылки.
private const string LinkItemPath = "/{cardId}/links/{linkId}";
// Вложенный путь загрузки вложений (multipart, поле files).
private const string FilesPath = "/{cardId}/files";
// Вложенный путь скачивания вложения (поток + attachment).
private const string FileDownloadPath = "/{cardId}/files/{fileId}/download";
// Вложенный путь удаления вложения.
private const string FileItemPath = "/{cardId}/files/{fileId}";
// Вложенный путь установки/снятия напоминания.
private const string ReminderPath = "/{cardId}/reminder";
// Вложенный путь ленивой загрузки содержимого источника.
private const string SourcePath = "/{cardId}/source";
// Вложенный путь «напомнить позже».
private const string ReminderSnoozePath = "/{cardId}/reminder/snooze";
// OpenAPI-тег группы.
private const string OpenApiTag = "cards";
// 404: карточка не найдена.
private const string CardNotFoundDetail = "Карточка не найдена";
// 400: тело PATCH не JSON-объект.
private const string InvalidBodyDetail = "Тело запроса должно быть JSON-объектом";
// 400: POST файлов без multipart/form-data.
private const string FormExpectedDetail = "Ожидается multipart/form-data";
// 400: POST напоминания без поля at.
private const string ReminderAtMissingDetail = "Поле at (epoch-ms) обязательно";
// 404 download: объекта нет в хранилище.
private const string FileNotFoundInStorageDetail = "Файл не найден в MinIO";
// 410 download: у записи файла нет objectKey.
private const string FileNotSavedDetail = "Файл не сохранён в объектном хранилище";
// Content-Type скачивания по умолчанию.
private const string DownloadContentTypeFallback = "application/octet-stream";
// Символ, убираемый из имени файла для Content-Disposition.
private const string FileNameQuoteCharacter = "\"";
/// <summary>
/// Регистрирует уникальные подпути /api/cards
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapCardDetailsEndpoints(this IEndpointRouteBuilder app)
{
var cards = app.MapGroup(CardsGroupPrefix).WithTags(OpenApiTag);
// Статические сегменты (/take, /clear-rejected) ДО /{cardId}; вложенные — за /{cardId}.
cards.MapPost("", CreateCardAsync);
cards.MapPost(TakePath, TakeCardAsync);
cards.MapPost(ClearRejectedPath, ClearRejectedAsync);
cards.MapPatch(CardIdPath, PatchCardAsync);
cards.MapPost(LinksPath, AddLinkAsync);
cards.MapDelete(LinkItemPath, RemoveLinkAsync);
cards.MapPost(FilesPath, UploadFilesAsync);
cards.MapGet(FileDownloadPath, DownloadFileAsync);
cards.MapDelete(FileItemPath, RemoveFileAsync);
cards.MapGet(SourcePath, ReadSourceAsync);
cards.MapPost(ReminderPath, SetReminderAsync);
cards.MapDelete(ReminderPath, ClearReminderAsync);
cards.MapPost(ReminderSnoozePath, SnoozeReminderAsync);
return app;
}
// POST /api/cards: ручное создание «локальной» карточки. Ответ — созданная карточка.
private static async Task<IResult> CreateCardAsync(
CreateCardRequest body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService service = context.RequestServices.GetRequiredService<CardsService>();
CardDto created = await service.CreateLocalCardAsync(ToCreateLocalDto(body), ct);
await AuditAppender.AppendTenantAsync(context, AuditEvents.CardCreated, new { cardId = created.Id }, ct);
return await ReadCardAsync(context, created.Id, ct);
}
// POST /api/cards/take {cardId}: «взять в работу» — перенос карточки в planned. Ответ — карточка.
private static async Task<IResult> TakeCardAsync(
TakeCardRequest body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService service = context.RequestServices.GetRequiredService<CardsService>();
CardDto? card = await service.TakeCardAsync(body.CardId ?? body.LeadId ?? string.Empty, ct);
return card is null
? EndpointResults.NotFound(CardNotFoundDetail)
: await ReadCardAsync(context, card.Id, ct);
}
// POST /api/cards/clear-rejected: полная очистка терминальной стадии «Отклонено».
private static async Task<IResult> ClearRejectedAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService service = context.RequestServices.GetRequiredService<CardsService>();
int cleared = await service.ClearRejectedAsync(ct);
return Results.Ok(new { ok = true, cleared });
}
// PATCH /api/cards/{cardId}: точечная правка полей (title/summary/contact/tzText/stack/budget).
// Тело читается как произвольный JSON-объект (presence-aware): явный null чистящих полей
// (budget:null, stack:null) не теряется типизированным биндингом. Ответ — обновлённая карточка.
private static async Task<IResult> PatchCardAsync(
string cardId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
IReadOnlyDictionary<string, JsonElement>? body = await ReadPatchBodyAsync(context, ct);
if (body is null)
{
return EndpointResults.BadRequest(InvalidBodyDetail);
}
CardsService service = context.RequestServices.GetRequiredService<CardsService>();
CardDto? card = await service.PatchCardAsync(cardId, body, ct);
return card is null
? EndpointResults.NotFound(CardNotFoundDetail)
: await ReadCardAsync(context, cardId, ct);
}
// POST /api/cards/{cardId}/links {name?,url}: добавить ссылку. Ответ — карточка.
private static async Task<IResult> AddLinkAsync(
string cardId,
CardLinkRequest body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService service = context.RequestServices.GetRequiredService<CardsService>();
CardResultDto result = await service.AddLinkAsync(
cardId,
body.Name ?? string.Empty,
body.Url ?? string.Empty,
ct);
if (result.Error is not null)
{
return EndpointResults.BadRequest(result.Error);
}
return result.Card is null
? EndpointResults.NotFound(CardNotFoundDetail)
: await ReadCardAsync(context, cardId, ct);
}
// DELETE /api/cards/{cardId}/links/{linkId}: удалить ссылку. Ответ — карточка.
private static async Task<IResult> RemoveLinkAsync(
string cardId,
string linkId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService service = context.RequestServices.GetRequiredService<CardsService>();
CardResultDto result = await service.RemoveLinkAsync(cardId, linkId, ct);
return result.Card is null
? EndpointResults.NotFound(CardNotFoundDetail)
: await ReadCardAsync(context, cardId, ct);
}
// POST /api/cards/{cardId}/files: загрузка вложений (multipart/form-data, поле files).
// Ответ — обновлённая карточка (с новыми files). Карточки нет → 404 до записи объектов. Каждый файл:
// имя/ContentType/поток/длина → CardsService.AddFileAsync. Ранний null — гонка (404).
private static async Task<IResult> UploadFilesAsync(
string cardId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
if (await cardsService.GetCardAsync(cardId, ct) is null)
{
return EndpointResults.NotFound(CardNotFoundDetail);
}
IFormCollection form;
try
{
form = await context.Request.ReadFormAsync(ct);
}
catch (InvalidOperationException)
{
// Тело не multipart/form-data — ReadFormAsync бросает; фронт так не шлёт.
return EndpointResults.BadRequest(FormExpectedDetail);
}
foreach (IFormFile file in form.Files)
{
await using Stream content = file.OpenReadStream();
CardFileDto? entry = await cardsService.AddFileAsync(cardId, file.FileName, file.ContentType, content, file.Length, ct);
if (entry is null)
{
return EndpointResults.NotFound(CardNotFoundDetail);
}
}
return await ReadCardAsync(context, cardId, ct);
}
// GET /api/cards/{cardId}/files/{fileId}/download: поток содержимого вложения.
// Карточки/записи нет → 404; пустой objectKey → 410; объекта нет в хранилище/сбой → 404. Ответ — поток
// с Content-Length/Content-Type из дескриптора; Content-Disposition attachment, имя без кавычек.
private static async Task<IResult> DownloadFileAsync(
string cardId,
string fileId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
CardFileDto? entry = await cardsService.GetFileEntryAsync(cardId, fileId, ct);
if (entry is null)
{
return EndpointResults.NotFound(CardNotFoundDetail);
}
if (string.IsNullOrWhiteSpace(entry.ObjectKey))
{
return EndpointResults.Gone(FileNotSavedDetail);
}
IFileStorage storage = context.RequestServices.GetRequiredService<IFileStorage>();
FileMeta? meta;
Stream? stream;
try
{
meta = await storage.StatAsync(entry.ObjectKey, ct);
stream = meta is null ? null : await storage.GetAsync(entry.ObjectKey, ct);
}
catch (OperationCanceledException) when (ct.IsCancellationRequested)
{
throw;
}
catch (Exception)
{
return EndpointResults.NotFound(FileNotFoundInStorageDetail);
}
if (meta is null || stream is null)
{
return EndpointResults.NotFound(FileNotFoundInStorageDetail);
}
context.Response.ContentLength = meta.Size;
string contentType = string.IsNullOrWhiteSpace(meta.ContentType)
? DownloadContentTypeFallback
: meta.ContentType;
return Results.Stream(stream, contentType, fileDownloadName: ToDownloadFileName(entry.Name));
}
// DELETE /api/cards/{cardId}/files/{fileId}: открепить файл. Ответ — карточка.
private static async Task<IResult> RemoveFileAsync(
string cardId,
string fileId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
CardDto? card = await cardsService.RemoveFileAsync(cardId, fileId, ct);
return card is null
? EndpointResults.NotFound(CardNotFoundDetail)
: await ReadCardAsync(context, cardId, ct);
}
// POST /api/cards/{cardId}/reminder {at: epoch-ms}: установить напоминание. Ответ — карточка.
private static async Task<IResult> SetReminderAsync(
string cardId,
ReminderSetRequest body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
if (body.At is null)
{
return EndpointResults.BadRequest(ReminderAtMissingDetail);
}
CardsService service = context.RequestServices.GetRequiredService<CardsService>();
CardResultDto result = await service.SetReminderAsync(cardId, body.At.Value, ct);
if (result.Error is not null)
{
return EndpointResults.BadRequest(result.Error);
}
return result.Card is null
? EndpointResults.NotFound(CardNotFoundDetail)
: await ReadCardAsync(context, cardId, ct);
}
// DELETE /api/cards/{cardId}/reminder: снять напоминание. Ответ — карточка.
private static async Task<IResult> ClearReminderAsync(
string cardId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService service = context.RequestServices.GetRequiredService<CardsService>();
return await service.ClearReminderAsync(cardId, ct)
? await ReadCardAsync(context, cardId, ct)
: EndpointResults.NotFound(CardNotFoundDetail);
}
// POST /api/cards/{cardId}/reminder/snooze: «напомнить позже» (now + 24 ч). Ответ — карточка.
private static async Task<IResult> SnoozeReminderAsync(
string cardId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService service = context.RequestServices.GetRequiredService<CardsService>();
return await service.SnoozeReminderAsync(cardId, ct)
? await ReadCardAsync(context, cardId, ct)
: EndpointResults.NotFound(CardNotFoundDetail);
}
// Читает карточку через единый сервис и возвращает её как ответ (404 — карточки нет).
// context: Контекст запроса (для резолва CardsService).
// cardId: Id карточки.
// ct: Токен отмены.
// Возвращает: 200 с единой карточкой либо 404.
// Читает содержимое источника карточки: провайдер по виду источника либо сохранённое в карточке.
// context: Контекст запроса (для резолва CardsService).
// cardId: Id карточки.
// ct: Токен отмены.
// Возвращает: 200 с SourceContent либо 404.
private static async Task<IResult> ReadSourceAsync(
HttpContext context,
string cardId,
CancellationToken ct)
{
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
CardDto? card = await cardsService.GetCardAsync(cardId, ct);
if (card is null)
{
return EndpointResults.NotFound(CardNotFoundDetail);
}
SourceContent content = await cardsService.ResolveSourceAsync(card, ct);
return Results.Ok(content);
}
private static async Task<IResult> ReadCardAsync(
HttpContext context,
string cardId,
CancellationToken ct)
{
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
CardDto? card = await cardsService.GetCardAsync(cardId, ct);
return card is null
? EndpointResults.NotFound(CardNotFoundDetail)
: Results.Ok(card);
}
// Имя файла для Content-Disposition без кавычек «"».
// name: Имя файла как в метаданных записи.
// Возвращает: Имя, безопасное для заголовка.
private static string ToDownloadFileName(string name) => name.Replace(FileNameQuoteCharacter, string.Empty);
private static CardLocalCreateDto ToCreateLocalDto(CreateCardRequest body)
{
return new CardLocalCreateDto(
Title: body.Title,
Summary: body.Summary,
Stack: body.Stack,
Budget: body.Budget,
Contact: body.Contact,
TzText: body.TzText,
ContainerId: body.ContainerId ?? body.Stage);
}
// Читает тело PATCH как произвольный JSON-объект: ключ → JsonElement (presence-aware).
// context: Контекст запроса.
// ct: Токен отмены.
// Возвращает: Словарь ключей тела либо null — тело не JSON-объект.
private static async Task<IReadOnlyDictionary<string, JsonElement>?> ReadPatchBodyAsync(HttpContext context, CancellationToken ct)
{
try
{
return await JsonSerializer.DeserializeAsync<Dictionary<string, JsonElement>>(
context.Request.Body,
options: null,
cancellationToken: ct);
}
catch (JsonException)
{
return null;
}
}
}
@@ -0,0 +1,461 @@
using Deal.Api.Endpoints.RequestModels;
using Deal.Api.Events;
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Cards.Application.Abstractions;
using Deal.Modules.Cards.Application.Dtos;
using Deal.Modules.Cards.Application.Models;
using Deal.Modules.Kanban.Application.Models;
using Deal.Modules.Kanban.Application.Services;
using Deal.Modules.Pipeline.Application.Models;
using Deal.Modules.Pipeline.Application.Services;
using Deal.Modules.Tenants.Application.Models;
namespace Deal.Api.Endpoints;
/// <summary>
/// Эндпоинты карточек и поиска
/// </summary>
public static class CardsEndpoints
{
// Префикс группы карточек.
private const string CardsGroupPrefix = "/api/cards";
// Префикс группы поиска (единственный эндпоинт группы — /api/search).
private const string ApiGroupPrefix = "/api";
// Путь поиска (GET).
private const string SearchPath = "/search";
private const string OpenApiTag = "dashboard";
private const string CardNotFoundDetail = "Карточка не найдена";
// 400 GET /cards: containerId не существует.
private const string UnknownColumnDetail = "Неизвестный контейнер";
private const string UserActor = "user";
private const string ReclassifiedEventType = "cards_reclassified";
// Контекст ручного перехода карточки: пользователь, обучение ML по цели переноса.
private static readonly TransitionContext UserMoveContext = new() { Actor = UserActor, Learn = true };
/// <summary>
/// Регистрирует группы /api/cards и /api
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapCardsEndpoints(this IEndpointRouteBuilder app)
{
var leads = app.MapGroup(CardsGroupPrefix).WithTags(OpenApiTag);
// Статические сегменты ДО /cards/{cardId}: ASP.NET Core отдаёт приоритет литералам, порядок регистрации
// сохранён для читаемости.
leads.MapGet("", ListCardsAsync);
leads.MapGet("/counts", CountsAsync);
leads.MapPost("/mark-all-seen", MarkAllSeenAsync);
leads.MapPost("/mark-col-seen", MarkColSeenAsync);
leads.MapPost("/clear-col", ClearColAsync);
leads.MapPost("/reclassify", ReclassifyAsync);
leads.MapGet("/{cardId}", GetCardAsync);
leads.MapPost("/{cardId}/reclassify", ReclassifyOneAsync);
leads.MapPost("/{cardId}/move", MoveAsync);
leads.MapPost("/{cardId}/trash", TrashAsync);
leads.MapPost("/{cardId}/restore", RestoreAsync);
leads.MapDelete("/{cardId}", DeleteAsync);
leads.MapPost("/{cardId}/comments", AddCommentAsync);
app.MapGroup(ApiGroupPrefix).WithTags(OpenApiTag).MapGet(SearchPath, SearchAsync);
return app;
}
// GET /api/cards?containerId=: карточки контейнера (или все карточки дашборда); 400 «Неизвестный контейнер».
// Параметр col принят как алиас containerId (совместимость со старым фронтом).
private static async Task<IResult> ListCardsAsync(
string? containerId,
string? col,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
string? target = string.IsNullOrEmpty(containerId) ? col : containerId;
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
if (!string.IsNullOrEmpty(target) && !await IsKnownContainerAsync(target, context, ct))
{
return EndpointResults.BadRequest(UnknownColumnDetail);
}
IReadOnlyList<CardDto> cards = await cardsService.ListCardsAsync(target, ct);
return Results.Ok(new { items = cards });
}
private static async Task<IResult> CountsAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
CardCountsDto counts = await cardsService.CountsAsync(ct);
var wire = new Dictionary<string, object> { ["new"] = counts.New };
foreach ((string col, CardColumnCountDto column) in counts.Columns)
{
wire[col] = column;
}
wire["learning"] = counts.Learning;
wire["ml"] = counts.Ml;
wire["ai"] = counts.Ai;
return Results.Ok(wire);
}
private static async Task<IResult> GetCardAsync(
string cardId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
CardDto? card = await cardsService.GetCardAsync(cardId, ct);
return card is null
? EndpointResults.NotFound(CardNotFoundDetail)
: Results.Ok(card);
}
private static async Task<IResult> MarkAllSeenAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
await cardsService.MarkSeenAsync(cardId: null, col: null, ct);
return Results.Ok(new { ok = true });
}
private static async Task<IResult> MarkColSeenAsync(
MarkColBody body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
if (body.Col is null)
{
return EndpointResults.BadRequest(UnknownColumnDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
await cardsService.MarkSeenAsync(cardId: null, col: body.Col, ct);
return Results.Ok(new { ok = true });
}
private static async Task<IResult> MoveAsync(
string cardId,
MoveBody body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
ICardMover mover = context.RequestServices.GetRequiredService<ICardMover>();
CardMoveResultDto outcome = await mover.MoveAsync(cardId, body.To ?? string.Empty, UserMoveContext, ct);
if (outcome.Error is not null)
{
return EndpointResults.BadRequest(outcome.Error);
}
if (!outcome.Exists)
{
return EndpointResults.NotFound(CardNotFoundDetail);
}
await AuditAppender.AppendTenantAsync(context, AuditEvents.CardMoved, new { cardId, to = body.To }, ct);
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
CardDto? unified = await cardsService.GetCardAsync(cardId, ct);
return unified is null
? EndpointResults.NotFound(CardNotFoundDetail)
: Results.Ok(unified);
}
private static async Task<IResult> TrashAsync(
string cardId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
CardDto? card = await cardsService.TrashCardAsync(cardId, ct);
if (card is null)
{
return EndpointResults.NotFound(CardNotFoundDetail);
}
await AuditAppender.AppendTenantAsync(context, AuditEvents.CardTrashed, new { cardId }, ct);
return Results.Ok(new { ok = true });
}
private static async Task<IResult> RestoreAsync(
string cardId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
string? col = await cardsService.RestoreCardAsync(cardId, ct);
if (col is null)
{
return EndpointResults.NotFound(CardNotFoundDetail);
}
await AuditAppender.AppendTenantAsync(context, AuditEvents.CardRestored, new { cardId, col }, ct);
return Results.Ok(new { ok = true, col });
}
private static async Task<IResult> DeleteAsync(
string cardId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
bool deleted = await cardsService.DeleteForeverAsync(cardId, ct);
if (!deleted)
{
return EndpointResults.NotFound(CardNotFoundDetail);
}
await AuditAppender.AppendTenantAsync(context, AuditEvents.CardDeleted, new { cardId }, ct);
return Results.Ok(new { ok = true });
}
private static async Task<IResult> ClearColAsync(
ClearColBody body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
ClearColResultDto result = await cardsService.ClearColAsync(body.Col ?? string.Empty, ct);
return result.Error is not null
? EndpointResults.BadRequest(result.Error)
: Results.Ok(new { ok = true, cleared = result.Cleared });
}
private static async Task<IResult> AddCommentAsync(
string cardId,
CommentBody body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
AddCommentResultDto result = await cardsService.AddCommentAsync(cardId, body.Text ?? string.Empty, ct);
if (result.Error is not null)
{
return EndpointResults.BadRequest(result.Error);
}
if (result.Comments is null)
{
return EndpointResults.NotFound(CardNotFoundDetail);
}
await AuditAppender.AppendTenantAsync(context, AuditEvents.CardCommentAdded, new { cardId }, ct);
return Results.Ok(new { comments = result.Comments });
}
// POST /api/cards/reclassify: переклассификация «Неразобранного» (все карточки либо ids).
// Тело ids опционально (фронт шлёт запрос без тела — все карточки inbox). Проход синхронный; при занятом
// проходе ответ {started:false, busy:true}. Поля started/busy/attempted сохранены ради совместимости,
// добавлены reclassified/moved/kept/trashed/skipped/usedAi/reason. Аудит — card_reclassified; после
// успешного прохода (reclassified &gt; 0) публикуется SSE cards_reclassified {reclassified,moved}.
// body: Тело запроса (ids — опционально).
// context: Контекст запроса.
// ct: Токен отмены.
private static async Task<IResult> ReclassifyAsync(
ReclassifyBody? body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardReclassifier reclassifier = context.RequestServices.GetRequiredService<CardReclassifier>();
SseBroker broker = context.RequestServices.GetRequiredService<SseBroker>();
Guid tenantId = context.GetCurrentUser()!.TenantId;
// Синхронный IProgress: события прогресса уходят в SSE в порядке прохода, до финального события.
var progress = new InlineProgress<ReclassifyProgressDto>(value => broker.Publish(
tenantId,
ReclassifiedEventType,
new
{
progress = true,
done = value.Done,
total = value.Total,
moved = value.Moved,
kept = value.Kept,
trashed = value.Trashed,
skipped = value.Skipped,
}));
ReclassifyResultDto result = await reclassifier.ReclassifyInboxAsync(body?.Ids, ct, progress);
await AppendReclassifyAuditAsync(context, result, ct);
PublishReclassified(context, result);
return Results.Ok(ToReclassifyWire(result));
}
// POST /api/cards/{cardId}/reclassify: переклассификация одной карточки; 404 «Карточка не найдена».
// cardId: Id карточки (c_...).
// context: Контекст запроса.
// ct: Токен отмены.
private static async Task<IResult> ReclassifyOneAsync(
string cardId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
CardDto? card = await cardsService.GetCardAsync(cardId, ct);
if (card is null)
{
return EndpointResults.NotFound(CardNotFoundDetail);
}
CardReclassifier reclassifier = context.RequestServices.GetRequiredService<CardReclassifier>();
ReclassifyResultDto result = await reclassifier.ReclassifyCardAsync(card, ct);
await AppendReclassifyAuditAsync(context, result, ct);
PublishReclassified(context, result);
return Results.Ok(ToReclassifyWire(result));
}
// Wire-форма итога переклассификации (camelCase; сохранены started/busy/attempted).
// result: Итог прохода.
// Возвращает: Объект ответа эндпоинта.
private static object ToReclassifyWire(ReclassifyResultDto result) => new
{
started = result.Started,
busy = result.Busy,
attempted = result.Attempted,
reclassified = result.Reclassified,
moved = result.Moved,
kept = result.Kept,
trashed = result.Trashed,
skipped = result.Skipped,
usedAi = result.UsedAi,
reason = result.Reason,
};
private static void PublishReclassified(HttpContext context, ReclassifyResultDto result)
{
if (!result.Started || result.Reclassified == 0)
{
return;
}
SseBroker broker = context.RequestServices.GetRequiredService<SseBroker>();
broker.Publish(
context.GetCurrentUser()!.TenantId,
ReclassifiedEventType,
new { reclassified = result.Reclassified, moved = result.Moved, progress = false });
}
// Аудит переклассификации: пишется только когда проход реально что-то изменил.
// context: Контекст запроса.
// result: Итог прохода.
// ct: Токен отмены.
private static Task AppendReclassifyAuditAsync(
HttpContext context,
ReclassifyResultDto result,
CancellationToken ct)
{
if (result.Reclassified == 0)
{
return Task.CompletedTask;
}
return AuditAppender.AppendTenantAsync(
context,
AuditEvents.CardReclassified,
new { attempted = result.Attempted, reclassified = result.Reclassified, moved = result.Moved, trashed = result.Trashed },
ct);
}
private static async Task<IResult> SearchAsync(
string? q,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
CardsService cardsService = context.RequestServices.GetRequiredService<CardsService>();
IReadOnlyList<CardDto> leads = await cardsService.SearchCardsAsync(q, ct);
// messages всегда []: фронт их не читает.
return Results.Ok(new { cards = leads, messages = Array.Empty<object>() });
}
// ── Внутреннее ─────────────────────────────────────────────────────────
// Существует ли контейнер с таким id (служебная зона/стадия/доска).
// col: Значение query-параметра containerId (непустое).
// context: Контекст запроса (для резолва ContainersService).
// ct: Токен отмены.
// Возвращает: True — контейнер допустим для фильтра.
private static async Task<bool> IsKnownContainerAsync(
string col,
HttpContext context,
CancellationToken ct)
{
ContainersService containers = context.RequestServices.GetRequiredService<ContainersService>();
return await containers.GetAsync(col, ct) is not null;
}
}
@@ -0,0 +1,8 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело POST /api/auth/change-password.
/// </summary>
/// <param name="OldPassword">Текущий пароль.</param>
/// <param name="NewPassword">Новый пароль (минимум 8 символов).</param>
public sealed record ChangePasswordRequest(string OldPassword, string NewPassword);
@@ -0,0 +1,7 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело POST /api/admin/check-message.
/// </summary>
/// <param name="Text">Текст сообщения для проверки фильтром.</param>
public sealed record CheckMessageRequest(string Text);
@@ -0,0 +1,312 @@
using System.Text.Json;
using Deal.Api.Endpoints.RequestModels;
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Kanban.Application.Models;
using Deal.Modules.Kanban.Application.Services;
using Deal.Modules.Tenants.Application.Models;
namespace Deal.Api.Endpoints;
/// <summary>
/// Эндпоинты контейнеров
/// </summary>
public static class ContainersEndpoints
{
// Префикс группы контейнеров.
private const string ContainersGroupPrefix = "/api/containers";
// OpenAPI-тег группы.
private const string OpenApiTag = "containers";
// 404 PATCH/accept: контейнер не найден.
private const string ContainerNotFoundDetail = "Контейнер не найден";
// 400: отсутствующий/явный null name контейнера.
private const string ContainerNameRequiredDetail = "Укажите название колонки";
// 400 reorder: отсутствующий/явный null order.
private const string ContainerOrderRequiredDetail = "Не указан порядок колонок";
// 400 PATCH: тело не JSON-объект.
private const string InvalidBodyDetail = "Тело запроса должно быть JSON-объектом";
// Опции разбора PATCH-тела: web-дефолты (camelCase + регистронезависимость).
private static readonly JsonSerializerOptions RequestJsonOptions = new(JsonSerializerDefaults.Web);
/// <summary>
/// Регистрирует группы /api/containers
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapContainersEndpoints(this IEndpointRouteBuilder app)
{
var containers = app.MapGroup(ContainersGroupPrefix).WithTags(OpenApiTag);
containers.MapGet("", ListContainersAsync);
containers.MapPost("", CreateContainerAsync);
containers.MapPost("/reorder", ReorderContainersAsync);
containers.MapGet("/state", GetColumnsStateAsync);
containers.MapPatch("/{containerId}/state", PatchColumnStateAsync);
containers.MapPost("/{containerId}/accept", AcceptSuggestedAsync);
containers.MapPatch("/{containerId}", PatchContainerAsync);
containers.MapDelete("/{containerId}", DeleteContainerAsync);
return app;
}
// GET /api/containers?space=: список контейнеров пространства (или всех) со счётчиками.
private static async Task<IResult> ListContainersAsync(
string? space,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
ContainersService containers = context.RequestServices.GetRequiredService<ContainersService>();
return Results.Ok(new { items = await containers.ListAsync(space, ct) });
}
// POST /api/containers: создать контейнер; ответ {id}.
private static async Task<IResult> CreateContainerAsync(
ContainerCreateRequest body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
if (body.Name is null)
{
return EndpointResults.BadRequest(ContainerNameRequiredDetail);
}
ContainersService containers = context.RequestServices.GetRequiredService<ContainersService>();
ContainerDto created = await containers.CreateAsync(
new ContainerCreateDto(
Name: body.Name,
Description: body.Description ?? string.Empty,
Color: body.Color,
Space: body.Space ?? ContainerSpaces.Dashboard,
Kind: body.Kind ?? ContainerKinds.Board,
Suggested: body.Suggested ?? false,
Rules: NormalizeWireRules(body.Rules),
Note: body.Note ?? string.Empty),
ct);
await AuditAppender.AppendTenantAsync(context, AuditEvents.ContainerCreated, new { id = created.Id, name = created.Name }, ct);
return Results.Ok(new { id = created.Id });
}
// PATCH /api/containers/{id}: частичное обновление; ответ {id}; 404 «Контейнер не найден».
private static async Task<IResult> PatchContainerAsync(
string containerId,
JsonElement body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
if (body.ValueKind != JsonValueKind.Object)
{
return EndpointResults.BadRequest(InvalidBodyDetail);
}
foreach (JsonProperty property in body.EnumerateObject())
{
if (string.Equals(property.Name, "name", StringComparison.OrdinalIgnoreCase)
&& property.Value.ValueKind == JsonValueKind.Null)
{
return EndpointResults.BadRequest(ContainerNameRequiredDetail);
}
}
ContainerPatchRequest? patchBody;
try
{
patchBody = body.Deserialize<ContainerPatchRequest>(RequestJsonOptions);
}
catch (JsonException)
{
return EndpointResults.BadRequest(InvalidBodyDetail);
}
if (patchBody is null)
{
return EndpointResults.BadRequest(InvalidBodyDetail);
}
ContainersService containers = context.RequestServices.GetRequiredService<ContainersService>();
ContainerDto? updated = await containers.PatchAsync(
containerId,
new ContainerPatchDto(
patchBody.Name,
patchBody.Description,
patchBody.Color,
patchBody.Collapsed,
patchBody.Suggested,
patchBody.Note,
NormalizeWireRules(patchBody.Rules),
patchBody.Policy),
ct);
if (updated is null)
{
return EndpointResults.NotFound(ContainerNotFoundDetail);
}
await AuditAppender.AppendTenantAsync(context, AuditEvents.ContainerUpdated, new { id = updated.Id }, ct);
return Results.Ok(new { id = updated.Id });
}
// POST /api/containers/{id}/accept: принять ИИ-предложение (suggested=false).
private static async Task<IResult> AcceptSuggestedAsync(
string containerId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
ContainersService containers = context.RequestServices.GetRequiredService<ContainersService>();
ContainerDto? accepted = await containers.AcceptSuggestedAsync(containerId, ct);
if (accepted is null)
{
return EndpointResults.NotFound(ContainerNotFoundDetail);
}
await AuditAppender.AppendTenantAsync(context, AuditEvents.ContainerUpdated, new { id = accepted.Id }, ct);
return Results.Ok(accepted);
}
// DELETE /api/containers/{id}: удалить контейнер; карточки → «Неразобранное» новыми.
private static async Task<IResult> DeleteContainerAsync(
string containerId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
ContainersService containers = context.RequestServices.GetRequiredService<ContainersService>();
int moved = await containers.DeleteAsync(containerId, ct);
await AuditAppender.AppendTenantAsync(context, AuditEvents.ContainerDeleted, new { id = containerId }, ct);
return Results.Ok(new { ok = true, movedToInbox = moved });
}
// POST /api/containers/reorder: порядок контейнеров пространства; ответ {ok:true}.
private static async Task<IResult> ReorderContainersAsync(
OrderBody body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
if (body.Order is null)
{
return EndpointResults.BadRequest(ContainerOrderRequiredDetail);
}
ContainersService containers = context.RequestServices.GetRequiredService<ContainersService>();
await containers.ReorderAsync(body.Space ?? ContainerSpaces.Dashboard, body.Order, ct);
return Results.Ok(new { ok = true });
}
// GET /api/containers/state: свёрнутость/ширина всех колонок (colState).
private static async Task<IResult> GetColumnsStateAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
ContainersService containers = context.RequestServices.GetRequiredService<ContainersService>();
IReadOnlyDictionary<string, ColumnStateDto> state = await containers.GetColStateAsync(ct);
var wire = new Dictionary<string, object>(StringComparer.Ordinal);
foreach ((string colId, ColumnStateDto colState) in state)
{
wire[colId] = ToWireState(colState);
}
return Results.Ok(wire);
}
// PATCH /api/containers/{id}/state: merge патча в состояние колонки; ответ — состояние этой колонки.
private static async Task<IResult> PatchColumnStateAsync(
string containerId,
ColStateBody body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
ContainersService containers = context.RequestServices.GetRequiredService<ContainersService>();
ColumnStateDto merged = await containers.PatchColStateAsync(
containerId,
new ColumnStateDto(body.Collapsed, body.Width),
ct);
return Results.Ok(ToWireState(merged));
}
// Правила из wire → каноничный ContainerRulesDto: отсутствующие группы становятся пустыми списками.
// rules: Правила из тела запроса (null — «не меняются/нет правил»).
// Возвращает: Каноничные правила с не-null группами; null — правил в теле нет.
private static ContainerRulesDto? NormalizeWireRules(ContainerRulesDto? rules)
{
if (rules is null)
{
return null;
}
return rules with
{
Mode = rules.Mode ?? string.Empty,
Direction = rules.Direction ?? Array.Empty<string>(),
Keywords = rules.Keywords ?? Array.Empty<string>(),
Stack = rules.Stack ?? Array.Empty<string>(),
Grade = rules.Grade ?? Array.Empty<string>(),
Exclude = rules.Exclude ?? Array.Empty<string>(),
Budget = rules.Budget is null ? null : rules.Budget with { Cur = rules.Budget.Cur ?? string.Empty },
Levels = rules.Levels ?? Array.Empty<string>(),
Locations = rules.Locations ?? Array.Empty<string>(),
Types = rules.Types ?? Array.Empty<string>(),
Prices = rules.Prices is null ? null : rules.Prices with { Cur = rules.Prices.Cur ?? string.Empty },
};
}
// Состояние колонки → wire-объект только с заданными полями (collapsed/width), без null.
// state: Состояние колонки (могут быть null-поля).
// Возвращает: Словарь из не-null полей состояния.
private static Dictionary<string, object> ToWireState(ColumnStateDto state)
{
var wire = new Dictionary<string, object>();
if (state.Collapsed is { } collapsed)
{
wire["collapsed"] = collapsed;
}
if (state.Width is not null)
{
wire["width"] = state.Width;
}
return wire;
}
}
@@ -0,0 +1,508 @@
using System.Text.Json;
using Deal.Api.Endpoints.RequestModels;
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Contracts.Integrations.Abstractions;
using Deal.Contracts.Integrations.Models;
using Deal.Modules.Discovery.Application.Exceptions;
using Deal.Modules.Discovery.Application.Models;
using Deal.Modules.Discovery.Application.Services;
using Deal.Modules.Settings.Application.Abstractions;
using Deal.Modules.Settings.Application.Models;
using Deal.Modules.Telegram.Application;
namespace Deal.Api.Endpoints;
/// <summary>
/// Эндпоинты /api/discovery
/// </summary>
public static class DiscoveryEndpoints
{
private const string DiscoveryGroupPrefix = "/api/discovery";
private const string DiscoveryOpenApiTag = "discovery";
// Путь списка задач (GET).
private const string TasksPath = "/tasks";
// Путь одной задачи: обновление (PATCH) / удаление (DELETE).
private const string TaskPath = "/tasks/{task_id}";
// Путь запуска поиска (POST).
private const string TaskStartPath = "/tasks/{task_id}/start";
// Путь паузы поиска (POST).
private const string TaskPausePath = "/tasks/{task_id}/pause";
// Путь ИИ-генерации ключевых слов по описанию задачи (POST).
private const string TaskGenerateKeywordsPath = "/tasks/{task_id}/generate-keywords";
// Путь списка кандидатов задачи со статус-фильтром (GET).
private const string TaskCandidatesPath = "/tasks/{task_id}/candidates";
// Путь ручного вступления в кандидата (POST).
private const string CandidateJoinPath = "/candidates/{dialog_id}/join";
// Путь отклонения кандидата в чёрный список (POST).
private const string CandidateRejectPath = "/candidates/{dialog_id}/reject";
// Путь чёрного списка (GET) и снятия записи (DELETE).
private const string BlacklistPath = "/blacklist";
// Путь записи чёрного списка (DELETE).
private const string BlacklistItemPath = "/blacklist/{dialog_id}";
// Путь лога задачи (GET).
private const string TaskLogPath = "/tasks/{task_id}/log";
private const string TaskNotFoundDetail = "Задача не найдена";
private const string CandidateNotFoundDetail = "Кандидат не найден";
private const string AlreadyJoinedDetail = "Уже вступили в этот источник";
private const string JoinedRejectDetail = "Уже вступили — удалите источник из каналов";
private const string JoinFailedFormat = "Не удалось вступить в @{0}: {1}";
private const string ManualRejectReason = "отклонено вручную";
private const string AiDisabledDetail = "ИИ выключен в настройках (aiEnabled)";
private const string NoDescriptionDetail = "У задачи нет описания — по нему генерируются ключи";
private const int KeywordsLimit = 30;
private const int KeywordLengthLimit = 60;
/// <summary>
/// Регистрирует группу /api/discovery
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapDiscoveryEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(DiscoveryGroupPrefix).WithTags(DiscoveryOpenApiTag);
group.MapGet(TasksPath, ListTasksAsync);
group.MapPost(TasksPath, CreateTaskAsync);
group.MapPatch(TaskPath, PatchTaskAsync);
group.MapDelete(TaskPath, DeleteTaskAsync);
group.MapPost(TaskStartPath, StartTaskAsync);
group.MapPost(TaskPausePath, PauseTaskAsync);
group.MapPost(TaskGenerateKeywordsPath, GenerateKeywordsAsync);
group.MapGet(TaskCandidatesPath, ListCandidatesAsync);
group.MapPost(CandidateJoinPath, JoinCandidateAsync);
group.MapPost(CandidateRejectPath, RejectCandidateAsync);
group.MapGet(BlacklistPath, ListBlacklistAsync);
group.MapDelete(BlacklistItemPath, RemoveBlacklistAsync);
group.MapGet(TaskLogPath, TaskLogAsync);
return app;
}
private static async Task<IResult> ListTasksAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
DiscoveryTasksService tasks = context.RequestServices.GetRequiredService<DiscoveryTasksService>();
IReadOnlyList<DiscoveryTaskDto> items = await tasks.ListAsync(ct);
return Results.Ok(new { items });
}
private static async Task<IResult> CreateTaskAsync(
DiscoveryTaskCreateBody body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
try
{
DiscoveryTasksService tasks = context.RequestServices.GetRequiredService<DiscoveryTasksService>();
DiscoveryTaskDto task = await tasks.CreateAsync(ToDraft(body), ct);
return Results.Ok(task);
}
catch (DiscoveryValidationException exception)
{
return EndpointResults.BadRequest(exception.Message);
}
}
private static async Task<IResult> PatchTaskAsync(
string task_id,
DiscoveryTaskPatchBody body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
try
{
DiscoveryTasksService tasks = context.RequestServices.GetRequiredService<DiscoveryTasksService>();
DiscoveryTaskDto? task = await tasks.PatchAsync(task_id, ToPatch(body), ct);
return task is null ? EndpointResults.NotFound(TaskNotFoundDetail) : Results.Ok(task);
}
catch (DiscoveryValidationException exception)
{
return EndpointResults.BadRequest(exception.Message);
}
}
private static async Task<IResult> DeleteTaskAsync(
string task_id,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
DiscoveryTasksService tasks = context.RequestServices.GetRequiredService<DiscoveryTasksService>();
bool deleted = await tasks.DeleteAsync(task_id, ct);
return deleted ? Results.Ok(new { ok = true }) : EndpointResults.NotFound(TaskNotFoundDetail);
}
private static async Task<IResult> StartTaskAsync(
string task_id,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
try
{
DiscoveryTasksService tasks = context.RequestServices.GetRequiredService<DiscoveryTasksService>();
DiscoveryTaskDto? task = await tasks.StartAsync(task_id, ct);
return task is null ? EndpointResults.NotFound(TaskNotFoundDetail) : Results.Ok(task);
}
catch (DiscoveryValidationException exception)
{
return EndpointResults.BadRequest(exception.Message);
}
}
private static async Task<IResult> PauseTaskAsync(
string task_id,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
DiscoveryTasksService tasks = context.RequestServices.GetRequiredService<DiscoveryTasksService>();
DiscoveryTaskDto? task = await tasks.PauseAsync(task_id, ct);
return task is null ? EndpointResults.NotFound(TaskNotFoundDetail) : Results.Ok(task);
}
private static async Task<IResult> GenerateKeywordsAsync(
string task_id,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
DiscoveryTasksService tasks = context.RequestServices.GetRequiredService<DiscoveryTasksService>();
DiscoveryTaskDto? task = await tasks.GetAsync(task_id, ct);
if (task is null)
{
return EndpointResults.NotFound(TaskNotFoundDetail);
}
ISettingsStore settings = context.RequestServices.GetRequiredService<ISettingsStore>();
if (!await ReadAiEnabledAsync(settings, ct))
{
return Results.Ok(new { keywords = Array.Empty<string>(), error = AiDisabledDetail });
}
string description = (task.Description ?? string.Empty).Trim();
if (description.Length == 0)
{
return Results.Ok(new { keywords = Array.Empty<string>(), error = NoDescriptionDetail });
}
try
{
IAiTools aiTools = context.RequestServices.GetRequiredService<IAiTools>();
AiGenerateKeywordsResultDto result = await aiTools.GenerateKeywordsAsync(description, ct);
if (result.Ok)
{
return Results.Ok(new { keywords = CleanKeywords(result.Keywords) });
}
return Results.Ok(new { keywords = Array.Empty<string>(), error = result.Error ?? ServiceUnavailableText });
}
catch (NotSupportedException exception)
{
return Results.Ok(new { keywords = Array.Empty<string>(), error = exception.Message });
}
}
private static async Task<IResult> ListCandidatesAsync(
string task_id,
string? status,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
DiscoveryTasksService tasks = context.RequestServices.GetRequiredService<DiscoveryTasksService>();
DiscoveryTaskDto? task = await tasks.GetAsync(task_id, ct);
if (task is null)
{
return EndpointResults.NotFound(TaskNotFoundDetail);
}
DiscoveryCandidatesService candidates = context.RequestServices.GetRequiredService<DiscoveryCandidatesService>();
IReadOnlyList<DiscoveryCandidateDto> items = await candidates.ListAsync(task_id, status, ct);
return Results.Ok(new { items });
}
private static async Task<IResult> JoinCandidateAsync(
string dialog_id,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
DiscoveryCandidatesService candidates = context.RequestServices.GetRequiredService<DiscoveryCandidatesService>();
DiscoveryCandidateDto? row = await candidates.GetAsync(dialog_id, ct);
if (row is null)
{
return EndpointResults.NotFound(CandidateNotFoundDetail);
}
if (row.Status == DiscoveryCandidateStatuses.Joined)
{
return EndpointResults.BadRequest(AlreadyJoinedDetail);
}
string username = (row.Username ?? string.Empty).Trim().TrimStart('@');
try
{
ITelegramGateway gateway = context.RequestServices.GetRequiredService<ITelegramGateway>();
await gateway.JoinAsync(username, ct);
}
catch (Exception exception) when (exception is not OperationCanceledException)
{
string reason = TelegramEndpoints.GatewayErrorText(exception);
return EndpointResults.BadRequest(string.Format(JoinFailedFormat, username, reason));
}
DialogsService dialogs = context.RequestServices.GetRequiredService<DialogsService>();
await dialogs.AddDiscoveredMonitoredAsync(dialog_id, row.Name, username, row.Kind, row.Hue, ct);
context.RequestServices.GetRequiredService<TelegramBackfillScheduler>().ScheduleFirstBackfill(dialog_id);
DiscoveryBlacklistService blacklist = context.RequestServices.GetRequiredService<DiscoveryBlacklistService>();
await blacklist.RemoveAsync(dialog_id, ct);
try
{
DiscoveryCandidateDto? joined = await candidates.MarkJoinedAsync(dialog_id, auto: false, ct);
return joined is null ? EndpointResults.NotFound(CandidateNotFoundDetail) : Results.Ok(joined);
}
catch (DiscoveryValidationException exception)
{
return EndpointResults.BadRequest(exception.Message);
}
}
private static async Task<IResult> RejectCandidateAsync(
string dialog_id,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
DiscoveryCandidatesService candidates = context.RequestServices.GetRequiredService<DiscoveryCandidatesService>();
DiscoveryCandidateDto? row = await candidates.GetAsync(dialog_id, ct);
if (row is null)
{
return EndpointResults.NotFound(CandidateNotFoundDetail);
}
if (row.Status == DiscoveryCandidateStatuses.Joined)
{
return EndpointResults.BadRequest(JoinedRejectDetail);
}
try
{
DiscoveryCandidateDto? rejected = await candidates.MarkRejectedAsync(dialog_id, ManualRejectReason, ct);
return rejected is null ? EndpointResults.NotFound(CandidateNotFoundDetail) : Results.Ok(rejected);
}
catch (DiscoveryValidationException exception)
{
return EndpointResults.BadRequest(exception.Message);
}
}
private static async Task<IResult> ListBlacklistAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
DiscoveryBlacklistService blacklist = context.RequestServices.GetRequiredService<DiscoveryBlacklistService>();
IReadOnlyList<DiscoveryBlacklistDto> items = await blacklist.ListAsync(ct);
return Results.Ok(new { items });
}
private static async Task<IResult> RemoveBlacklistAsync(
string dialog_id,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
DiscoveryBlacklistService blacklist = context.RequestServices.GetRequiredService<DiscoveryBlacklistService>();
await blacklist.RemoveAsync(dialog_id, ct);
return Results.Ok(new { ok = true });
}
private static async Task<IResult> TaskLogAsync(
string task_id,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
DiscoveryTasksService tasks = context.RequestServices.GetRequiredService<DiscoveryTasksService>();
DiscoveryTaskDto? task = await tasks.GetAsync(task_id, ct);
if (task is null)
{
return EndpointResults.NotFound(TaskNotFoundDetail);
}
DiscoveryLogService log = context.RequestServices.GetRequiredService<DiscoveryLogService>();
IReadOnlyList<DiscoveryLogDto> items = await log.TaskLogAsync(task_id, ct);
return Results.Ok(new { items });
}
/// <param name="raw">Сырые ключи ответа модели (null — пусто).</param>
/// <returns>Очищенные ключи (не более 30, каждый ≤60 символов).</returns>
public static IReadOnlyList<string> CleanKeywords(IEnumerable<string>? raw)
{
if (raw is null)
{
return Array.Empty<string>();
}
var seen = new HashSet<string>(StringComparer.OrdinalIgnoreCase);
var outList = new List<string>();
foreach (string? item in raw)
{
if (item is null)
{
continue;
}
string keyword = item.Trim();
if (keyword.Length == 0 || keyword.Length > KeywordLengthLimit || !seen.Add(keyword))
{
continue;
}
outList.Add(keyword);
if (outList.Count >= KeywordsLimit)
{
break;
}
}
return outList;
}
private const string ServiceUnavailableText = "ИИ недоступен — повторите попытку через несколько секунд";
private static async Task<bool> ReadAiEnabledAsync(ISettingsStore settings, CancellationToken ct)
{
SettingValue? row = await settings.GetAsync(SettingsKeys.AiEnabled, ct);
if (row is null)
{
return SettingsDefaults.AiEnabled;
}
try
{
using JsonDocument document = JsonDocument.Parse(row.ValueJson);
return document.RootElement.ValueKind is JsonValueKind.True or JsonValueKind.False
? document.RootElement.GetBoolean()
: SettingsDefaults.AiEnabled;
}
catch (JsonException)
{
return SettingsDefaults.AiEnabled;
}
}
// Маппит тело создания в черновик сервиса (значения пограничные передаются как есть — дефолты в сервисе).
// body: Тело запроса (wire-поля camelCase).
// Возвращает: Черновик создания задачи (DiscoveryTaskDraft).
private static DiscoveryTaskDraft ToDraft(DiscoveryTaskCreateBody body)
{
return new DiscoveryTaskDraft
{
Name = body.Name,
Description = body.Description ?? string.Empty,
Keywords = body.Keywords,
MinSubscribers = body.MinSubscribers,
Lang = body.Lang,
Threshold = body.Threshold,
SampleSize = body.SampleSize,
PlanJoins = body.PlanJoins,
AutoJoin = body.AutoJoin,
};
}
private static DiscoveryTaskPatch ToPatch(DiscoveryTaskPatchBody body)
{
return new DiscoveryTaskPatch
{
Name = body.Name,
Description = body.Description,
Keywords = body.Keywords,
MinSubscribers = body.MinSubscribers,
Lang = body.Lang,
Threshold = body.Threshold,
SampleSize = body.SampleSize,
PlanJoins = body.PlanJoins,
AutoJoin = body.AutoJoin,
};
}
}
@@ -0,0 +1,107 @@
using Deal.Api.Events;
using Deal.Api.Extensions;
using Deal.Api.Models;
using Deal.Api.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// SSE-поток событий канбана
/// </summary>
public static class EventsEndpoint
{
private const string EventsPath = "/api/events";
private const string OpenApiTag = "events";
private const string EventStreamContentType = "text/event-stream";
private const string NoCacheHeaderValue = "no-cache";
private const string NoBufferingHeaderValue = "no";
// Ping-комментарий: строки протокола SSE, начинающиеся с ':', клиент игнорирует.
private const string PingComment = ": ping\n\n";
private static readonly TimeSpan PingInterval = TimeSpan.FromSeconds(15);
/// <summary>
/// Регистрирует GET /api/events.
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapEventsEndpoint(this IEndpointRouteBuilder app)
{
app.MapGet(EventsPath, StreamEventsAsync).WithTags(OpenApiTag);
return app;
}
// GET /api/events: поток text/event-stream канала тенанта сессии.
// context: Контекст запроса (сессия — HttpContext.Items).
// ct: Отмена запроса: клиент отвалился — завершаем поток и отписываемся.
private static async Task StreamEventsAsync(HttpContext context, CancellationToken ct)
{
CurrentUser? user = context.GetCurrentUser();
if (user is null)
{
await EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail).ExecuteAsync(context);
return;
}
SseBroker broker = context.RequestServices.GetRequiredService<SseBroker>();
SseSubscription subscription = broker.Subscribe(user.TenantId);
try
{
HttpResponse response = context.Response;
response.ContentType = EventStreamContentType;
response.Headers["Cache-Control"] = NoCacheHeaderValue;
response.Headers["X-Accel-Buffering"] = NoBufferingHeaderValue;
while (true)
{
using var pingTimeout = CancellationTokenSource.CreateLinkedTokenSource(ct);
pingTimeout.CancelAfter(PingInterval);
try
{
await subscription.Events.WaitToReadAsync(pingTimeout.Token);
}
catch (OperationCanceledException) when (!ct.IsCancellationRequested)
{
// Тишина 15 с — ping держит соединение; отмену клиента ловит внешний catch.
await WriteFrameAsync(response, PingComment, ct);
continue;
}
while (subscription.Events.TryRead(out SseEvent? sseEvent))
{
await WriteFrameAsync(response, sseEvent.RenderFrame(), ct);
}
}
}
catch (OperationCanceledException) when (ct.IsCancellationRequested)
{
// Клиент закрыл соединение — штатное завершение потока.
}
catch (IOException)
{
// Сброс соединения клиентом (закрытая вкладка/обрыв сети): ответ уже не доставить.
}
finally
{
broker.Unsubscribe(user.TenantId, subscription.Id);
}
}
// Пишет frame в поток ответа и сбрасывает буфер — события уходят сразу (не пачкой).
// response: Ответ (stream уже начат).
// frame: Frame протокола SSE.
// ct: Токен отмены запроса.
private static async Task WriteFrameAsync(
HttpResponse response,
string frame,
CancellationToken ct)
{
await response.WriteAsync(frame, ct);
await response.Body.FlushAsync(ct);
}
}
@@ -0,0 +1,47 @@
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Pipeline.Application.Models;
using Deal.Modules.Pipeline.Application.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// Тестер конвейера: сухой прогон текста через стоп-фильтры, ML и ИИ
/// </summary>
public static class FilterTesterEndpoints
{
private const string ApiGroupPrefix = "/api";
private const string CheckMessagePath = "/admin/check-message";
private const string OpenApiTag = "settings";
/// <summary>
/// Регистрирует POST /api/admin/check-message.
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapFilterTesterEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(ApiGroupPrefix).WithTags(OpenApiTag);
group.MapPost(CheckMessagePath, CheckAsync);
return app;
}
// POST /api/admin/check-message: прогон текста по этапам конвейера без записи карточки.
private static async Task<IResult> CheckAsync(
CheckMessageRequest body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
// Резолв после 401-гейта: воркер scoped на TenantDbContext (tenant-контекст запроса).
PipelineWorkerService worker = context.RequestServices.GetRequiredService<PipelineWorkerService>();
PipelineDryRunDto result = await worker.DryRunAsync(body.Text ?? string.Empty, ct);
return Results.Ok(result);
}
}
@@ -0,0 +1,98 @@
using Deal.Api.Services;
using Deal.Modules.Tenants.Application.Models;
using Deal.Modules.Tenants.Application.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// Публичный эндпоинт активации инвайта
/// </summary>
public static class JoinEndpoint
{
// Путь ручки (вне группы /api/operator — публичная).
private const string JoinPath = "/api/join";
// OpenAPI-тег.
private const string JoinOpenApiTag = "join";
// Текст 400: приглашение с таким кодом не найдено.
private const string InviteNotFoundDetail = "Приглашение не найдено";
private const string InviteExpiredDetail = "Срок действия приглашения истёк";
// Текст 400: приглашение уже активировано (повторная активация тем же кодом).
private const string InviteUsedDetail = "Приглашение уже использовано";
// Текст 400: приглашение отозвано оператором.
private const string InviteRevokedDetail = "Приглашение отозвано";
private const string EmailMismatchDetail = "Email не совпадает с приглашением";
private const string EmailTakenDetail = "Этот email уже зарегистрирован";
private const string PasswordTooShortDetail = "Пароль слишком короткий (минимум 8 символов)";
// Текст 400: целевой тенант инвайта не существует (Security review).
private const string TenantNotFoundDetail = "Тенант приглашения не найден";
// Текст 400: целевой тенант инвайта приостановлен (Security review).
private const string TenantSuspendedDetail = "Тенант приглашения приостановлен";
/// <summary>
/// Регистрирует POST /api/join.
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapJoinEndpoint(this IEndpointRouteBuilder app)
{
app.MapPost(JoinPath, JoinAsync).WithTags(JoinOpenApiTag);
return app;
}
private static async Task<IResult> JoinAsync(
JoinRequest body,
JoinService joinService,
AuditService auditService,
HttpContext context,
CancellationToken ct)
{
var result = await joinService.ActivateAsync(body.Code, body.Email, body.Name, body.Password, ct);
if (!result.Ok || result.Login is null || result.UserId is null || result.TenantId is null)
{
return EndpointResults.BadRequest(DetailFor(result.Error));
}
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.InviteJoined,
AuditActorTypes.Tenant,
ActorId: result.UserId,
TenantId: result.TenantId,
Ip: ClientIp(context),
// Код инвайта — capability-токен: в аудит пишется только SHA-256-хэш (Security review).
DetailJson: AuditService.ToDetailJson(new { email = result.Login, codeHash = SessionTokens.HashToken(body.Code?.Trim() ?? string.Empty) })), ct);
return Results.Ok(new { ok = true, login = result.Login });
}
// Фиксированный текст 400 по коду ошибки JoinService (все отказы активации — 400).
// error: Код ошибки JoinResultDto.
// Возвращает: Текст детали ошибки.
private static string DetailFor(string? error) =>
error switch
{
JoinResultDto.ErrorExpired => InviteExpiredDetail,
JoinResultDto.ErrorUsed => InviteUsedDetail,
JoinResultDto.ErrorRevoked => InviteRevokedDetail,
JoinResultDto.ErrorEmailMismatch => EmailMismatchDetail,
JoinResultDto.ErrorEmailTaken => EmailTakenDetail,
JoinResultDto.ErrorPasswordTooShort => PasswordTooShortDetail,
JoinResultDto.ErrorTenantNotFound => TenantNotFoundDetail,
JoinResultDto.ErrorTenantSuspended => TenantSuspendedDetail,
_ => InviteNotFoundDetail,
};
// IP-адрес клиента для аудита (без порта; null, если недоступен).
// context: Контекст запроса.
// Возвращает: Строковое представление IP или null.
private static string? ClientIp(HttpContext context) => context.Connection.RemoteIpAddress?.ToString();
}
@@ -0,0 +1,10 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело POST /api/join — активация инвайта.
/// </summary>
/// <param name="Code">Код приглашения (16 url-safe символов).</param>
/// <param name="Email">Email активирующего; обязан совпасть с email приглашения (нормализует JoinService).</param>
/// <param name="Name">Имя нового тенанта (только когда у инвайта нет целевого тенанта); null — имя = email.</param>
/// <param name="Password">Пароль пользователя (минимум 8 символов).</param>
public sealed record JoinRequest(string? Code, string? Email, string? Name, string? Password);
@@ -0,0 +1,8 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело POST /api/auth/login.
/// </summary>
/// <param name="Login">Логин пользователя.</param>
/// <param name="Password">Пароль в открытом виде.</param>
public sealed record LoginRequest(string Login, string Password);
@@ -0,0 +1,9 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело POST /api/ml/apply.
/// </summary>
/// <param name="DialogId">Id диалога/канала Telegram, где лежит исходное сообщение.</param>
/// <param name="MsgId">Id сообщения внутри диалога.</param>
/// <param name="Action">Ручное решение: spam | board:&lt;id&gt; | skip.</param>
public sealed record MlApplyRequest(string DialogId, int MsgId, string Action);
@@ -0,0 +1,8 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело POST /api/ml/candidates.
/// </summary>
/// <param name="DialogId">Id диалога/канала Telegram; пусто — выборка по всем источникам тенанта.</param>
/// <param name="Limit">Сколько последних сообщений вернуть (кламп 1..60, дефолт 10).</param>
public sealed record MlCandidatesRequest(string DialogId, int Limit);
+163
View File
@@ -0,0 +1,163 @@
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Contracts.Integrations.Abstractions;
using Deal.Contracts.Integrations.Models;
using Deal.Modules.Pipeline.Application.Models;
using Deal.Modules.Pipeline.Application.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// Эндпоинты ML-панели
/// </summary>
public static class MlEndpoints
{
private const string MlGroupPrefix = "/api/ml";
private const string MlOpenApiTag = "ml";
// Путь статуса ML (GET).
private const string StatusPath = "/status";
// Путь сброса модели (POST).
private const string ResetPath = "/reset";
// Путь проверки ML на тексте (POST).
private const string PredictPath = "/predict";
// Путь разбора сообщений канала (POST).
private const string CandidatesPath = "/candidates";
// Путь ручного решения по сообщению (POST).
private const string ApplyPath = "/apply";
private const int MinPredictTextLength = 2;
private const int PredictTextPreviewLength = 200;
private const string EnterTextDetail = "Введите текст";
private const string MessageNotFoundDetail = "Исходное сообщение не найдено";
/// <summary>
/// Регистрирует группу /api/ml
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapMlEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(MlGroupPrefix).WithTags(MlOpenApiTag);
group.MapGet(StatusPath, StatusAsync);
group.MapPost(ResetPath, ResetAsync);
group.MapPost(PredictPath, PredictAsync);
group.MapPost(CandidatesPath, CandidatesAsync);
group.MapPost(ApplyPath, ApplyAsync);
return app;
}
private static async Task<IResult> StatusAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
IMlClient mlClient = context.RequestServices.GetRequiredService<IMlClient>();
return Results.Ok(await mlClient.StatusAsync(ct));
}
private static async Task<IResult> ResetAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
IMlClient mlClient = context.RequestServices.GetRequiredService<IMlClient>();
return Results.Ok(await mlClient.ResetAsync(ct));
}
private static async Task<IResult> PredictAsync(
MlPredictRequest body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
string text = (body.Text ?? string.Empty).Trim();
if (text.Length < MinPredictTextLength)
{
return EndpointResults.BadRequest(EnterTextDetail);
}
IMlClient mlClient = context.RequestServices.GetRequiredService<IMlClient>();
MlPredictResultDto result = await mlClient.PredictAsync(text, ct);
string preview = text.Length <= PredictTextPreviewLength
? text
: text[..PredictTextPreviewLength];
return Results.Ok(new
{
text = preview,
take = result.Take,
label = result.Label,
scores = result.Scores,
hits = result.Hits,
ready = result.Ready,
margin = result.Margin,
terms = result.Terms,
type = result.Type,
});
}
private static async Task<IResult> CandidatesAsync(
MlCandidatesRequest body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
MlReviewService review = context.RequestServices.GetRequiredService<MlReviewService>();
IReadOnlyList<MlCandidateDto> items = await review.CandidatesAsync(body.DialogId, body.Limit, ct);
return Results.Ok(new { items });
}
private static async Task<IResult> ApplyAsync(
MlApplyRequest body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
MlReviewService review = context.RequestServices.GetRequiredService<MlReviewService>();
MlApplyResult? result = await review.ApplyAsync(body.DialogId, body.MsgId, body.Action, ct);
if (result is null)
{
return EndpointResults.NotFound(MessageNotFoundDetail);
}
if (result.Error is not null)
{
return EndpointResults.BadRequest(result.Error);
}
return Results.Ok(new
{
ok = result.Ok,
learned = result.Learned,
moved = result.Moved,
leadId = result.LeadId,
});
}
}
@@ -0,0 +1,7 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело POST /api/ml/predict.
/// </summary>
/// <param name="Text">Текст сообщения для проверки ML.</param>
public sealed record MlPredictRequest(string Text);
@@ -0,0 +1,155 @@
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Tenants.Application.Models;
using Deal.Modules.Tenants.Application.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// Операторские read-only эндпоинты аналитики
/// </summary>
public static class OperatorAnalyticsEndpoints
{
private const string AnalyticsGroupPrefix = "/api/operator/analytics";
// OpenAPI-тег группы.
private const string OperatorOpenApiTag = "operator";
// Группировка расхода токенов по умолчанию (сутки).
private const string DefaultGroupBy = TokenUsageGroupBys.Day;
// 400 tokens: неизвестная группировка.
private const string InvalidGroupByDetail = "Неизвестная группировка (day|tenant|provider|model)";
/// <summary>
/// Регистрирует группу /api/operator/analytics
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapOperatorAnalyticsEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(AnalyticsGroupPrefix).WithTags(OperatorOpenApiTag);
group.MapGet("/overview", OverviewAsync);
group.MapGet("/tokens", TokensAsync);
group.MapGet("/activity", ActivityAsync);
group.MapGet("/suspicious", SuspiciousAsync);
return app;
}
private static async Task<IResult> SuspiciousAsync(
DateTimeOffset? from,
DateTimeOffset? to,
HttpContext context,
SuspiciousActivityService suspiciousService,
CancellationToken ct)
{
if (context.GetCurrentOperator() is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
SuspiciousActivityDto report = await suspiciousService.AnalyzeAsync(from, to, ct);
return Results.Ok(report);
}
// GET /api/operator/analytics/overview?from=&amp;to=: сводка (тенанты, токены, события, входы/выходы).
// from: Начало периода (включительно; ISO-8601).
// to: Конец периода (включительно; ISO-8601).
// context: Контекст запроса.
// analyticsService: Сервис аналитики (scoped).
// ct: Токен отмены.
// Возвращает: 200 сводка или 401 без операторской сессии.
private static async Task<IResult> OverviewAsync(
DateTimeOffset? from,
DateTimeOffset? to,
HttpContext context,
AnalyticsService analyticsService,
CancellationToken ct)
{
if (context.GetCurrentOperator() is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
AnalyticsOverviewDto overview = await analyticsService.OverviewAsync(from, to, ct);
return Results.Ok(overview);
}
// GET /api/operator/analytics/tokens?groupBy=&amp;tenantId=&amp;from=&amp;to=: агрегаты расхода токенов.
// groupBy: Группировка day|tenant|provider|model (дефолт day).
// tenantId: Тенант (равенство; пусто — все тенанты).
// from: Начало периода (включительно; ISO-8601).
// to: Конец периода (включительно; ISO-8601).
// context: Контекст запроса.
// analyticsService: Сервис аналитики (scoped).
// ct: Токен отмены.
// Возвращает: 200 агрегаты, 400 неизвестная группировка или 401 без операторской сессии.
private static async Task<IResult> TokensAsync(
string? groupBy,
Guid? tenantId,
DateTimeOffset? from,
DateTimeOffset? to,
HttpContext context,
AnalyticsService analyticsService,
CancellationToken ct)
{
if (context.GetCurrentOperator() is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
string normalizedGroupBy = string.IsNullOrWhiteSpace(groupBy) ? DefaultGroupBy : groupBy;
if (!IsKnownGroupBy(normalizedGroupBy))
{
return EndpointResults.BadRequest(InvalidGroupByDetail);
}
AnalyticsTokensDto tokens = await analyticsService.TokensAsync(normalizedGroupBy, tenantId, from, to, ct);
return Results.Ok(tokens);
}
// GET /api/operator/analytics/activity?eventType=&amp;actorType=&amp;actorId=&amp;tenantId=&amp;from=&amp;to=&amp;limit=&amp;offset=: лента действий.
// eventType: Тип события (равенство; пусто — без фильтра).
// actorType: Тип актора operator|tenant|system (равенство).
// actorId: Идентификатор актора (равенство).
// tenantId: Тенант (равенство).
// from: Нижняя граница At (включительно; ISO-8601).
// to: Верхняя граница At (включительно; ISO-8601).
// limit: Размер страницы (дефолт 100, кламп 1..500).
// offset: Смещение страницы (≥0).
// context: Контекст запроса.
// analyticsService: Сервис аналитики (scoped).
// ct: Токен отмены.
// Возвращает: 200 {items, total, limit, offset} или 401 без операторской сессии.
private static async Task<IResult> ActivityAsync(
string? eventType,
string? actorType,
Guid? actorId,
Guid? tenantId,
DateTimeOffset? from,
DateTimeOffset? to,
int? limit,
int? offset,
HttpContext context,
AnalyticsService analyticsService,
CancellationToken ct)
{
if (context.GetCurrentOperator() is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
AnalyticsActivityDto activity = await analyticsService.ActivityAsync(
eventType, actorType, actorId, tenantId, from, to, limit, offset, ct);
return Results.Ok(activity);
}
/// <summary>
/// Известна ли группировка расхода токенов
/// </summary>
/// <param name="groupBy">Значение группировки.</param>
/// <returns>True — поддерживаемая группировка.</returns>
public static bool IsKnownGroupBy(string groupBy) =>
groupBy is TokenUsageGroupBys.Day or TokenUsageGroupBys.Tenant
or TokenUsageGroupBys.Provider or TokenUsageGroupBys.Model;
}
@@ -0,0 +1,73 @@
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Tenants.Application.Models;
using Deal.Modules.Tenants.Application.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// Операторский эндпоинт чтения аудита
/// </summary>
public static class OperatorAuditEndpoints
{
private const string OperatorGroupPrefix = "/api/operator";
// Путь ленты аудита относительно группы.
private const string AuditPath = "/audit";
private const string OperatorOpenApiTag = "operator";
/// <summary>
/// Регистрирует группу /api/operator
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapOperatorAuditEndpoints(this IEndpointRouteBuilder app)
{
app.MapGroup(OperatorGroupPrefix).WithTags(OperatorOpenApiTag).MapGet(AuditPath, ListAsync);
return app;
}
private static async Task<IResult> ListAsync(
string? eventType,
string? actorType,
Guid? actorId,
Guid? tenantId,
DateTimeOffset? from,
DateTimeOffset? to,
int? limit,
int? offset,
HttpContext context,
AuditService auditService,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
var filter = new AuditQueryDto(
eventType, actorType, tenantId, from, to, NormalizeLimit(limit), actorId, NormalizeOffset(offset));
IReadOnlyList<AuditRecordDto> items = await auditService.QueryAsync(filter, ct);
int total = await auditService.CountAsync(filter, ct);
return Results.Ok(new { items, total });
}
/// <summary>
/// Нормализует limit запроса
/// </summary>
/// <param name="limit">Запрошенный размер выборки (null — не задан).</param>
/// <returns>Значение для фильтра.</returns>
public static int NormalizeLimit(int? limit) =>
limit is null
? AuditService.DefaultQueryLimit
: Math.Max(1, Math.Min(AuditService.MaxQueryLimit, limit.Value));
/// <summary>
/// Нормализует offset запроса
/// </summary>
/// <param name="offset">Запрошенное смещение (null — не задано).</param>
/// <returns>Неотрицательное смещение.</returns>
public static int NormalizeOffset(int? offset) => Math.Max(0, offset ?? 0);
}
@@ -0,0 +1,157 @@
using Deal.Api.Extensions;
using Deal.Api.Middleware;
using Deal.Api.Models;
using Deal.Api.Services;
using Deal.Modules.Tenants.Application.Models;
using Deal.Modules.Tenants.Application.Services;
using Microsoft.Extensions.Options;
using AspNetCoreCookieOptions = Microsoft.AspNetCore.Http.CookieOptions;
// Имя конфигурационного типа совпадает с Microsoft.AspNetCore.Http.CookieOptions — фиксируем алиасами.
using OperatorCookieOptions = Deal.Api.Configuration.OperatorCookieOptions;
namespace Deal.Api.Endpoints;
/// <summary>
/// HTTP-эндпоинты аутентификации оператора
/// </summary>
public static class OperatorAuthEndpoints
{
private const string InvalidCredentialsDetail = "Неверный логин или пароль оператора";
private const string OperatorAuthGroupPrefix = "/api/operator/auth";
private const string OperatorAuthOpenApiTag = "operator-auth";
/// <summary>
/// Регистрирует группу /api/operator/auth
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapOperatorAuthEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(OperatorAuthGroupPrefix).WithTags(OperatorAuthOpenApiTag);
group.MapPost("/login", LoginAsync).RequireRateLimiting(RateLimitPolicies.AuthPolicy);
group.MapPost("/logout", LogoutAsync);
group.MapGet("/me", MeAsync);
return app;
}
private static async Task<IResult> LoginAsync(
LoginRequest body,
OperatorAuthService operatorAuthService,
AuditService auditService,
IOptions<OperatorCookieOptions> cookieOptions,
HttpContext context,
CancellationToken ct,
LoginAttemptGuard loginAttemptGuard)
{
string? attemptedLogin = NormalizeLogin(body.Login);
if (await loginAttemptGuard.IsBlockedAsync(ClientIp(context), attemptedLogin, ct))
{
return EndpointResults.TooManyRequests(LoginAttemptGuard.BlockedDetail);
}
var result = await operatorAuthService.LoginAsync(body.Login, body.Password, ct);
if (result.Login is null || result.Token is null)
{
if (attemptedLogin is not null)
{
await loginAttemptGuard.RecordFailureAsync(ClientIp(context), attemptedLogin, ct);
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.OperatorLoginFailed,
AuditActorTypes.Operator,
ActorId: null,
TenantId: null,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { login = attemptedLogin })), ct);
}
return EndpointResults.Unauthorized(InvalidCredentialsDetail);
}
await loginAttemptGuard.ResetAsync(ClientIp(context), result.Login, ct);
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.OperatorLoginOk,
AuditActorTypes.Operator,
ActorId: result.OperatorId,
TenantId: null,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { login = result.Login })), ct);
SetOperatorSessionCookie(context, cookieOptions.Value, result.Token);
return Results.Ok(new { ok = true, login = result.Login });
}
// POST /api/operator/auth/logout: удаление операторской сессии по токену из куки и очистка куки (всегда ok).
private static async Task<IResult> LogoutAsync(
OperatorAuthService operatorAuthService,
IOptions<OperatorCookieOptions> cookieOptions,
HttpContext context,
CancellationToken ct)
{
string cookieName = cookieOptions.Value.Name;
string? rawToken = context.Request.Cookies[cookieName];
// Оператор разрешённой сессии — до её удаления (OperatorSessionMiddleware наполнил Items).
CurrentOperator? operatorIdentity = context.GetCurrentOperator();
await operatorAuthService.LogoutAsync(rawToken, ct);
context.Response.Cookies.Delete(cookieName);
if (operatorIdentity is not null)
{
await AuditAppender.AppendOperatorAsync(context, AuditEvents.OperatorLogout, new { login = operatorIdentity.Login }, ct);
}
return Results.Ok(new { ok = true });
}
private static IResult MeAsync(HttpContext context)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
return Results.Ok(new { login = operatorIdentity.Login, ok = true });
}
// Выставляет httpOnly-куку сессии оператора: SameSite=Lax, Path=/, MaxAge=Hours, Secure — из конфига.
// context: Контекст запроса.
// options: Настройки куки из конфигурации (секция OperatorCookies).
// rawToken: Raw-токен операторской сессии.
private static void SetOperatorSessionCookie(
HttpContext context,
OperatorCookieOptions options,
string rawToken)
{
// MaxAge — OperatorCookies:Hours; код-дефолт значения ссылается на
// OperatorAuthService.SessionLifetimeHours (единый источник «12 часов», см. OperatorCookieOptions).
context.Response.Cookies.Append(
options.Name,
rawToken,
new AspNetCoreCookieOptions
{
HttpOnly = true,
SameSite = SameSiteMode.Lax,
Path = "/",
MaxAge = TimeSpan.FromHours(options.Hours),
Secure = options.Secure,
});
}
// Нормализованная попытка логина для аудита (нижний регистр/обрезка); null — писать нечего.
// login: Логин из тела запроса.
// Возвращает: Нормализованный логин или null при пустом/пробельном входе.
private static string? NormalizeLogin(string? login)
{
string? normalized = login?.Trim().ToLowerInvariant();
return string.IsNullOrEmpty(normalized) ? null : normalized;
}
// IP-адрес клиента для аудита (без порта; null, если недоступен).
// context: Контекст запроса.
// Возвращает: Строковое представление IP или null.
private static string? ClientIp(HttpContext context) => context.Connection.RemoteIpAddress?.ToString();
}
@@ -0,0 +1,182 @@
using Deal.Api.Extensions;
using Deal.Api.Observability;
using Deal.Api.Services;
using Deal.Infrastructure.Integrations.Models;
using Deal.Infrastructure.Integrations.Options;
using Deal.Infrastructure.Integrations.Services;
using Deal.Infrastructure.Persistence;
using Microsoft.EntityFrameworkCore;
namespace Deal.Api.Endpoints;
/// <summary>
/// Операторский health
/// </summary>
public static class OperatorHealthEndpoints
{
private const string OperatorGroupPrefix = "/api/operator";
// Путь health-ручки.
private const string HealthPath = "/health";
// OpenAPI-тег группы.
private const string OperatorOpenApiTag = "operator-health";
// Статус БД/сервиса: доступна/здоров (ok).
private const string StatusOk = "ok";
// Статус сервиса: БД/сервис недоступен (down).
private const string StatusDown = "down";
// Статус сервиса: ответил, но не SERVING (grpc NOT_SERVING/SERVICE_UNKNOWN).
private const string StatusUnhealthy = "unhealthy";
private const string StatusLocal = "local";
// Режим сервиса: Local-адаптеры (UseLocal=true).
private const string ModeLocal = "local";
// Режим сервиса: gRPC-клиент (UseLocal=false).
private const string ModeGrpc = "grpc";
// Имя ml-service в ответе (порядок секций — как в стартовых логах Program.cs).
private const string MlServiceName = "ml";
// Имя ai-service в ответе.
private const string AiServiceName = "ai";
// Имя telegram-service в ответе.
private const string TelegramServiceName = "telegram";
// Таймаут проверки БД, миллисекунд (health не должен висеть на мёртвом хосте Postgres).
private const int DatabaseProbeTimeoutMilliseconds = 5000;
/// <summary>
/// Регистрирует GET /api/operator/health
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapOperatorHealthEndpoints(this IEndpointRouteBuilder app)
{
app.MapGroup(OperatorGroupPrefix).WithTags(OperatorOpenApiTag).MapGet(HealthPath, GetAsync);
return app;
}
// GET /api/operator/health: {ok, core:{db}, services:[{name,mode,status,reachable}]} (всегда 200).
private static async Task<IResult> GetAsync(
HttpContext context,
DealDbContext dbContext,
ServiceHealthProbe healthProbe,
RuntimeDepthsCollector depthsCollector,
MlServiceOptions mlOptions,
AiServiceOptions aiOptions,
TelegramServiceOptions telegramOptions,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
// Параллельно: БД (SELECT 1), health-пробы сервисов (до 3 с на сервис) и снимок глубин очередей/сессий.
Task<string> databaseTask = ProbeDatabaseAsync(dbContext, ct);
Task<List<ServiceEntryDto>> servicesTask = ProbeServicesAsync(healthProbe, mlOptions, aiOptions, telegramOptions, ct);
Task<RuntimeDepthsDto> depthsTask = depthsCollector.CollectAsync(ct);
await Task.WhenAll(databaseTask, servicesTask, depthsTask);
string databaseStatus = await databaseTask;
List<ServiceEntryDto> services = await servicesTask;
RuntimeDepthsDto depths = await depthsTask;
bool ok = databaseStatus == StatusOk
&& services.All(service => service.Mode == ModeLocal || service.Status == StatusOk);
return Results.Ok(new
{
ok,
core = new { db = databaseStatus },
services,
queues = new { pipeline = depths.PipelineQueue, mlOutbox = depths.MlOutbox },
sessions = new { active = depths.ActiveSessions },
});
}
// Проверяет доступность БД core: SELECT 1 через DealDbContext (public-схема) с таймаутом 5 с.
// dbContext: Системный контекст.
// ct: Токен отмены.
// Возвращает: Статус БД: ok/down (сбой не роняет ручку).
private static async Task<string> ProbeDatabaseAsync(DealDbContext dbContext, CancellationToken ct)
{
try
{
using var timeout = CancellationTokenSource.CreateLinkedTokenSource(ct);
timeout.CancelAfter(DatabaseProbeTimeoutMilliseconds);
await dbContext.Database.ExecuteSqlRawAsync("SELECT 1", timeout.Token);
return StatusOk;
}
catch (Exception)
{
// Postgres недоступен (контейнер не поднят/сеть) — оператор видит core.db=down, ручка жива.
return StatusDown;
}
}
// Пробы сервисов ml/ai/telegram по их конфигурации: Local-режим — пометка local без вызова;
// gRPC-режим — health-проба к Services:*:Endpoint (ServiceHealthProbe).
// healthProbe: Проба grpc.health.v1.
// mlOptions: Конфигурация ml-service.
// aiOptions: Конфигурация ai-service.
// telegramOptions: Конфигурация telegram-service.
// ct: Токен отмены.
// Возвращает: Записи состояния сервисов в порядке ml → ai → telegram.
private static async Task<List<ServiceEntryDto>> ProbeServicesAsync(
ServiceHealthProbe healthProbe,
MlServiceOptions mlOptions,
AiServiceOptions aiOptions,
TelegramServiceOptions telegramOptions,
CancellationToken ct)
{
var services = new List<ServiceEntryDto>(capacity: 3);
await ProbeServiceAsync(services, healthProbe, MlServiceName, mlOptions.UseLocal, mlOptions.Endpoint, ct);
await ProbeServiceAsync(services, healthProbe, AiServiceName, aiOptions.UseLocal, aiOptions.Endpoint, ct);
await ProbeServiceAsync(services, healthProbe, TelegramServiceName, telegramOptions.UseLocal, telegramOptions.Endpoint, ct);
return services;
}
// Одна запись состояния сервиса в списке services (см. ProbeServicesAsync).
// services: Куда добавить запись.
// healthProbe: Проба grpc.health.v1.
// name: Имя сервиса в ответе.
// useLocal: True — Local-режим (UseLocal=true): реальный сервис не подключён.
// endpoint: Базовый адрес сервиса (для gRPC-режима).
// ct: Токен отмены.
private static async Task ProbeServiceAsync(
List<ServiceEntryDto> services,
ServiceHealthProbe healthProbe,
string name,
bool useLocal,
string endpoint,
CancellationToken ct)
{
if (useLocal)
{
services.Add(new ServiceEntryDto(name, ModeLocal, StatusLocal, Reachable: false));
return;
}
ServiceHealthResult result = await healthProbe.ProbeAsync(endpoint, ct);
string status = (result.Reachable, result.Serving) switch
{
(true, true) => StatusOk,
(true, false) => StatusUnhealthy,
_ => StatusDown,
};
services.Add(new ServiceEntryDto(name, ModeGrpc, status, result.Reachable));
}
// Запись состояния сервиса в ответе /api/operator/health (приватная форма сериализации).
// Name: Имя сервиса (ml/ai/telegram).
// Mode: Режим: local (UseLocal=true) | grpc (UseLocal=false).
// Status: Состояние: ok | unhealthy | down (в Local-режиме — local).
// Reachable: True — сервис ответил на health-пробу (в Local-режиме всегда false).
private sealed record ServiceEntryDto(string Name, string Mode, string Status, bool Reachable);
}
@@ -0,0 +1,8 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело POST /api/operator/invites
/// </summary>
/// <param name="Email">Email приглашённого (регистр/пробелы не важны — нормализует InvitesService).</param>
/// <param name="TenantId">Целевой тенант; null — при активации будет создан новый тенант.</param>
public sealed record OperatorInviteCreateRequest(string? Email, Guid? TenantId);
@@ -0,0 +1,138 @@
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Tenants.Application.Models;
using Deal.Modules.Tenants.Application.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// Операторские эндпоинты приглашений
/// </summary>
public static class OperatorInvitesEndpoints
{
// Текст 400: email пустой/некорректного формата.
private const string InvalidEmailDetail = "Некорректный email";
private const string DuplicateActiveDetail = "Для этого email уже есть активное приглашение";
// Текст 404: приглашение с таким кодом не найдено.
private const string InviteNotFoundDetail = "Приглашение не найдено";
// Текст 400: отзыв приглашения не в статусе pending (уже отозвано/использовано/истекло).
private const string InviteNotPendingDetail = "Отозвать можно только ожидающее активации приглашение";
private const string InvitesGroupPrefix = "/api/operator/invites";
// Относительный путь отзыва приглашения.
private const string RevokePath = "/{code}/revoke";
// OpenAPI-тег группы.
private const string InvitesOpenApiTag = "operator-invites";
/// <summary>
/// Регистрирует группу /api/operator/invites
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapOperatorInvitesEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(InvitesGroupPrefix).WithTags(InvitesOpenApiTag);
group.MapGet("", ListAsync);
group.MapPost("", CreateAsync);
group.MapPost(RevokePath, RevokeAsync);
return app;
}
// GET /api/operator/invites: список приглашений (новые сверху, со статусами; expired проставляется лениво).
private static async Task<IResult> ListAsync(
HttpContext context,
InvitesService invitesService,
CancellationToken ct)
{
if (context.GetCurrentOperator() is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
IReadOnlyList<InviteDto> items = await invitesService.ListAsync(ct);
return Results.Ok(new { items });
}
// POST /api/operator/invites: создание приглашения; результат пишется в аудит (invite_created).
private static async Task<IResult> CreateAsync(
OperatorInviteCreateRequest body,
HttpContext context,
InvitesService invitesService,
AuditService auditService,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
InviteCreateResultDto result = await invitesService.CreateInviteAsync(
operatorIdentity.OperatorId, body.Email, body.TenantId, ct);
if (!result.Ok || result.Invite is null)
{
string detail = result.Error == InviteCreateResultDto.ErrorDuplicateActive
? DuplicateActiveDetail
: InvalidEmailDetail;
return EndpointResults.BadRequest(detail);
}
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.InviteCreated,
AuditActorTypes.Operator,
ActorId: operatorIdentity.OperatorId,
TenantId: null,
Ip: ClientIp(context),
// Код инвайта — capability-токен (по нему активируется приглашение): в аудит пишется
// только его SHA-256-хэш, чтобы утечка ленты не давала рабочие коды (Security review).
DetailJson: AuditService.ToDetailJson(new { email = result.Invite.Email, codeHash = SessionTokens.HashToken(result.Invite.Code) })), ct);
InviteDto invite = result.Invite;
return Results.Ok(new { invite.Code, invite.Email, invite.TenantId, invite.ExpiresAt, invite.Status });
}
// POST /api/operator/invites/{code}/revoke: отзыв ожидающего приглашения; результат пишется в аудит (invite_revoked).
private static async Task<IResult> RevokeAsync(
string code,
HttpContext context,
InvitesService invitesService,
AuditService auditService,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
InviteRevokeResultDto result = await invitesService.RevokeAsync(code, ct);
if (!result.Ok)
{
return result.Error == InviteRevokeResultDto.ErrorNotFound
? EndpointResults.NotFound(InviteNotFoundDetail)
: EndpointResults.BadRequest(InviteNotPendingDetail);
}
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.InviteRevoked,
AuditActorTypes.Operator,
ActorId: operatorIdentity.OperatorId,
TenantId: null,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { email = result.Invite!.Email, codeHash = SessionTokens.HashToken(result.Invite.Code) })), ct);
return Results.Ok(new { ok = true });
}
// IP-адрес клиента для аудита (без порта; null, если недоступен).
// context: Контекст запроса.
// Возвращает: Строковое представление IP или null.
private static string? ClientIp(HttpContext context) => context.Connection.RemoteIpAddress?.ToString();
}
@@ -0,0 +1,8 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело PATCH /api/operator/tenants/{id}/limit
/// </summary>
/// <param name="Budget">Новый бюджет периода в токенах (≥0; 0 — ИИ запрещён); null — оставить текущий.</param>
/// <param name="Period">Новый тип периода (константа <c>TenantLimitPeriods</c>: month|day); null — оставить текущий.</param>
public sealed record OperatorLimitUpdateRequest(long? Budget, string? Period);
@@ -0,0 +1,222 @@
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Tenants.Application.Abstractions;
using Deal.Modules.Tenants.Application.Models;
using Deal.Modules.Tenants.Application.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// Операторские эндпоинты лимитов ИИ-бюджета
/// </summary>
public static class OperatorLimitsEndpoints
{
// Текст 400: PATCH без полей (null-тело/пустой объект).
private const string EmptyUpdateDetail = "Укажите новый бюджет или период";
// Текст 400: бюджет отрицательный (порог лимита не позволяет).
private const string NegativeBudgetDetail = "Бюджет должен быть неотрицательным";
// Текст 400: период не month и не day (константы TenantLimitPeriods).
private const string InvalidPeriodDetail = "Период должен быть month или day";
// Текст 404: тенант с таким id не найден в реестре.
private const string TenantNotFoundDetail = "Тенант не найден";
// Верхняя граница процента расхода (диапазон 0..100) — константа расчёта CalculatePercent.
private const int PercentMax = 100;
private const string OperatorGroupPrefix = "/api/operator";
private const string TenantsGroupPrefix = "/api/operator/tenants";
// Путь сводки лимитов по всем тенантам.
private const string SummaryPath = "/limits";
// Относительный путь лимита тенанта (просмотр/смена).
private const string TenantLimitPath = "/{id:guid}/limit";
// OpenAPI-тег группы сводки лимитов.
private const string LimitsOpenApiTag = "operator-limits";
private static readonly TokenBudgetService BudgetService = new();
/// <summary>
/// Регистрирует ручки лимитов
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapOperatorLimitsEndpoints(this IEndpointRouteBuilder app)
{
app.MapGroup(OperatorGroupPrefix).WithTags(LimitsOpenApiTag).MapGet(SummaryPath, ListSummaryAsync);
var tenantsGroup = app.MapGroup(TenantsGroupPrefix).WithTags(LimitsOpenApiTag);
tenantsGroup.MapGet(TenantLimitPath, GetLimitAsync);
tenantsGroup.MapPatch(TenantLimitPath, PatchLimitAsync);
return app;
}
private static async Task<IResult> ListSummaryAsync(
HttpContext context,
ITenantRepository tenantRepository,
ITenantLimitStore limitStore,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
IReadOnlyList<TenantRecordDto> tenants = await tenantRepository.ListAsync(ct);
var items = new List<object>(tenants.Count);
foreach (TenantRecordDto tenant in tenants)
{
BudgetStateDto state = await limitStore.GetStateAsync(tenant.Id, ct);
items.Add(new
{
tenantId = tenant.Id,
name = tenant.Name,
budget = state.BudgetTokens,
period = state.Period,
used = state.UsedTokens,
percent = CalculatePercent(state.UsedTokens, state.BudgetTokens),
status = state.Status,
});
}
return Results.Ok(new { items });
}
// GET /api/operator/tenants/{id}/limit: детали лимита тенанта (форма BuildDetailDto).
private static async Task<IResult> GetLimitAsync(
Guid id,
HttpContext context,
ITenantRepository tenantRepository,
ITenantLimitStore limitStore,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
TenantRecordDto? tenant = await tenantRepository.FindByIdAsync(id, ct);
if (tenant is null)
{
return EndpointResults.NotFound(TenantNotFoundDetail);
}
BudgetStateDto state = await limitStore.GetStateAsync(id, ct);
return Results.Ok(BuildDetailDto(tenant.Name, state));
}
// PATCH /api/operator/tenants/{id}/limit: смена бюджета/периода (сброс флагов + аудит tenant_limit_changed).
private static async Task<IResult> PatchLimitAsync(
Guid id,
OperatorLimitUpdateRequest? body,
HttpContext context,
ITenantRepository tenantRepository,
ITenantLimitStore limitStore,
AuditService auditService,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
if (body is null || (body.Budget is null && string.IsNullOrWhiteSpace(body.Period)))
{
return EndpointResults.BadRequest(EmptyUpdateDetail);
}
if (body.Budget is < 0)
{
return EndpointResults.BadRequest(NegativeBudgetDetail);
}
if (body.Period is not null
&& body.Period != TenantLimitPeriods.Month
&& body.Period != TenantLimitPeriods.Day)
{
return EndpointResults.BadRequest(InvalidPeriodDetail);
}
TenantRecordDto? tenant = await tenantRepository.FindByIdAsync(id, ct);
if (tenant is null)
{
return EndpointResults.NotFound(TenantNotFoundDetail);
}
// Текущее состояние — источник значений не заданных в PATCH полей (период/бюджет меняются по отдельности).
BudgetStateDto current = await limitStore.GetStateAsync(id, ct);
long newBudget = body.Budget ?? current.BudgetTokens;
string newPeriod = body.Period ?? current.Period;
if (newBudget == current.BudgetTokens && newPeriod == current.Period)
{
// Идемпотентный повторный PATCH: без изменения хранилища и без дубля аудита.
return Results.Ok(BuildDetailDto(tenant.Name, current));
}
BudgetStateDto updated = await limitStore.UpdateBudgetAsync(id, newBudget, newPeriod, ct);
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.TenantLimitChanged,
AuditActorTypes.Operator,
ActorId: operatorIdentity.OperatorId,
TenantId: id,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new
{
tenantId = id,
oldBudget = current.BudgetTokens,
oldPeriod = current.Period,
budgetTokens = newBudget,
period = newPeriod,
})), ct);
return Results.Ok(BuildDetailDto(tenant.Name, updated));
}
/// <summary>
/// Процент расхода бюджета для операторской сводки/деталей
/// </summary>
/// <param name="usedTokens">Использовано токенов с начала периода.</param>
/// <param name="budgetTokens">Бюджет периода.</param>
/// <returns>Процент в диапазоне 0..100 (расход сверх бюджета показывается как 100).</returns>
public static int CalculatePercent(long usedTokens, long budgetTokens)
{
if (budgetTokens <= 0 || usedTokens >= budgetTokens)
{
return PercentMax;
}
return (int)(usedTokens * (double)PercentMax / budgetTokens);
}
// Форма деталей лимита тенанта (GET и ответ PATCH — единая).
// name: Имя тенанта (реестр).
// state: Состояние бюджета (после ленивого reset).
// Возвращает: Объект ответа: лимит + расход + флаги порогов + статус тенанта.
private static object BuildDetailDto(string name, BudgetStateDto state) => new
{
tenantId = state.TenantId,
name,
status = state.Status,
allowed = state.Allowed,
budget = state.BudgetTokens,
period = state.Period,
periodStart = state.PeriodStart,
used = state.UsedTokens,
remaining = BudgetService.RemainingTokens(state.UsedTokens, state.BudgetTokens),
percent = CalculatePercent(state.UsedTokens, state.BudgetTokens),
warned80 = state.Warned80,
notifiedExhausted = state.NotifiedExhausted,
};
// IP-адрес клиента для аудита (без порта; null, если недоступен).
// context: Контекст запроса.
// Возвращает: Строковое представление IP или null.
private static string? ClientIp(HttpContext context) => context.Connection.RemoteIpAddress?.ToString();
}
@@ -0,0 +1,57 @@
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Infrastructure.Tenancy;
namespace Deal.Api.Endpoints;
/// <summary>
/// Операторские maintenance-ручки
/// </summary>
public static class OperatorMaintenanceEndpoints
{
// Префикс группы операторских maintenance-ручек.
private const string MaintenanceGroupPrefix = "/api/operator/maintenance";
// Относительный путь пакетной миграции схем тенантов.
private const string MigrateTenantsPath = "/tenants/migrate";
// OpenAPI-тег группы.
private const string MaintenanceOpenApiTag = "operator-maintenance";
/// <summary>
/// Регистрирует группу /api/operator/maintenance
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapOperatorMaintenanceEndpoints(this IEndpointRouteBuilder app)
{
app.MapGroup(MaintenanceGroupPrefix)
.WithTags(MaintenanceOpenApiTag)
.MapPost(MigrateTenantsPath, MigrateTenantsAsync);
return app;
}
// POST /api/operator/maintenance/tenants/migrate: миграция схем всех тенантов (сводка прогресса).
private static async Task<IResult> MigrateTenantsAsync(
HttpContext context,
TenantSchemaMigrationService migrationService,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
TenantMigrationSummary summary = await migrationService.MigrateAllAsync(ct);
return Results.Ok(new
{
ok = summary.Ok,
total = summary.Total,
migrated = summary.Migrated,
failed = summary.Failed,
failedSchemas = summary.FailedSchemas,
durationMs = summary.DurationMs,
});
}
}
@@ -0,0 +1,141 @@
using Deal.Api.Endpoints.RequestModels;
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Api.Telegram;
using Deal.Modules.Tenants.Application.Models;
using Deal.Modules.Tenants.Application.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// Операторские ручки глобальных
/// </summary>
public static class OperatorSettingsEndpoints
{
// Префикс группы операторских настроек.
private const string SettingsGroupPrefix = "/api/operator/settings";
// OpenAPI-тег группы.
private const string SettingsOpenApiTag = "operator-settings";
// Относительный путь глобальных ключей Telegram (GET/PUT).
private const string TelegramKeysPath = "/telegram-keys";
// Текст 400: пустое тело PUT (ни одного поля).
private const string EmptyBodyDetail = "Укажите api_id и api_hash";
// Текст 400: частичное обновление, но ключей ещё нет — нужны оба поля.
private const string MissingKeysDetail = "Ключи ещё не заданы — укажите и api_id, и api_hash";
// Текст 400: api_id не 5..9 цифр.
private const string InvalidApiIdDetail = "api_id должен состоять из 5–9 цифр";
// Текст 400: api_hash пустой/маска/с префиксом enc:.
private const string InvalidApiHashDetail = "Укажите непустой api_hash";
/// <summary>
/// Регистрирует группу /api/operator/settings
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapOperatorSettingsEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(SettingsGroupPrefix).WithTags(SettingsOpenApiTag);
group.MapGet(TelegramKeysPath, GetTelegramKeysAsync);
group.MapPut(TelegramKeysPath, PutTelegramKeysAsync);
return app;
}
// GET /api/operator/settings/telegram-keys: маскированные глобальные ключи Telegram.
// context: Контекст запроса.
// keys: Сервис глобальных ключей Telegram (scoped).
// ct: Токен отмены.
// Возвращает: 200 маскированный снимок или 401 без операторской сессии.
private static async Task<IResult> GetTelegramKeysAsync(
HttpContext context,
TelegramKeysService keys,
CancellationToken ct)
{
if (context.GetCurrentOperator() is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
TelegramKeysMaskedDto snapshot = await keys.GetMaskedAsync(ct);
return Results.Ok(snapshot);
}
// PUT /api/operator/settings/telegram-keys: частичное сохранение глобальных ключей Telegram
// оператором.
// Поля можно передавать по отдельности: непереданное поле (null) сохраняет текущее значение,
// явное значение (в т.ч. пустая строка) валидируется. Если ключей ещё нет, оба поля обязательны.
// body: Тело {apiId?, apiHash?} (хотя бы одно поле).
// context: Контекст запроса.
// keys: Сервис глобальных ключей Telegram (scoped).
// auditService: Сервис аудита (событие telegram_keys_changed).
// ct: Токен отмены.
// Возвращает: 200 маскированный снимок, 400 при невалидных/недостающих полях или 401 без операторской сессии.
private static async Task<IResult> PutTelegramKeysAsync(
OperatorTelegramKeysRequest? body,
HttpContext context,
TelegramKeysService keys,
AuditService auditService,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
if (body is null)
{
return EndpointResults.BadRequest(EmptyBodyDetail);
}
// null — поле не передано (сохраняем текущее); непустая строка/плейсхолдер — валидируем явно.
string? apiId = body.ApiId?.Trim();
string? apiHash = body.ApiHash?.Trim();
if (apiId is null && apiHash is null)
{
return EndpointResults.BadRequest(EmptyBodyDetail);
}
if (apiId is not null && !TelegramKeysService.IsValidApiId(apiId))
{
return EndpointResults.BadRequest(InvalidApiIdDetail);
}
if (apiHash is not null && !TelegramKeysService.IsValidApiHash(apiHash))
{
return EndpointResults.BadRequest(InvalidApiHashDetail);
}
// Частичное обновление: недостающее поле берём из текущих ключей; если ключей ещё нет — нужны оба.
TgKeysSnapshot current = await keys.GetAsync(ct);
string effectiveApiId = apiId ?? current.ApiId;
string effectiveApiHash = apiHash ?? current.ApiHash;
if (effectiveApiId.Length == 0 || effectiveApiHash.Length == 0)
{
return EndpointResults.BadRequest(MissingKeysDetail);
}
await keys.SaveAsync(effectiveApiId, effectiveApiHash, ct);
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.TelegramKeysChanged,
AuditActorTypes.Operator,
ActorId: operatorIdentity.OperatorId,
TenantId: null,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { apiId = effectiveApiId, apiHashSet = true })), ct);
TelegramKeysMaskedDto snapshot = await keys.GetMaskedAsync(ct);
return Results.Ok(snapshot);
}
// IP-адрес клиента для аудита (без порта; null, если недоступен).
// context: Контекст запроса.
// Возвращает: Строковое представление IP или null.
private static string? ClientIp(HttpContext context) => context.Connection.RemoteIpAddress?.ToString();
}
@@ -0,0 +1,8 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело POST /api/operator/tenants
/// </summary>
/// <param name="Name">Имя тенанта (обязательно; пробелы по краям обрезаются).</param>
/// <param name="Email">Email владельца (опционально): создаёт сразу пользователя-владельца с одноразовым паролем.</param>
public sealed record OperatorTenantCreateRequest(string? Name, string? Email);
@@ -0,0 +1,7 @@
namespace Deal.Api.Endpoints;
/// <summary>
/// Тело POST /api/operator/tenants/{id}/impersonate
/// </summary>
/// <param name="Login">Логин пользователя, под которым оператор входит (impersonation); null/пустой — берётся первый пользователь тенанта (по времени создания).</param>
public sealed record OperatorTenantImpersonateRequest(string? Login);
@@ -0,0 +1,270 @@
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Tenants.Application.Models;
using Deal.Modules.Tenants.Application.Services;
using Microsoft.Extensions.Options;
using CookieOptions = Deal.Api.Configuration.CookieOptions;
namespace Deal.Api.Endpoints;
/// <summary>
/// Операторские эндпоинты тенантов
/// </summary>
public static class OperatorTenantsEndpoints
{
// Текст 400: имя тенанта пустое/пробельное (create).
private const string TenantNameRequiredDetail = "Имя тенанта обязательно";
// Текст 400: email пустой/некорректного формата (create с владельцем).
private const string InvalidEmailDetail = "Некорректный email";
// Текст 400: пользователь с таким email уже зарегистрирован (users.login unique, create с владельцем).
private const string EmailTakenDetail = "Этот email уже зарегистрирован";
// Текст 404: тенант с таким id не найден.
private const string TenantNotFoundDetail = "Тенант не найден";
// Текст 404: пользователь с таким login не найден в тенанте.
private const string UserNotFoundInTenantDetail = "Пользователь не найден в тенанте";
// Текст 400: в тенанте нет пользователей, а login не указан (impersonation без выбора).
private const string TenantHasNoUsersDetail = "В тенанте нет пользователей для входа";
private const string TenantsGroupPrefix = "/api/operator/tenants";
// Относительный путь деталей тенанта.
private const string TenantByIdPath = "/{id:guid}";
// Относительный путь приостановки тенанта.
private const string SuspendPath = "/{id:guid}/suspend";
// Относительный путь возобновления тенанта.
private const string UnsuspendPath = "/{id:guid}/unsuspend";
// Относительный путь impersonation пользователя тенанта.
private const string ImpersonatePath = "/{id:guid}/impersonate";
// OpenAPI-тег группы.
private const string TenantsOpenApiTag = "operator-tenants";
/// <summary>
/// Регистрирует группу /api/operator/tenants
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapOperatorTenantsEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(TenantsGroupPrefix).WithTags(TenantsOpenApiTag);
group.MapGet("", ListAsync);
group.MapPost("", CreateAsync);
group.MapGet(TenantByIdPath, GetByIdAsync);
group.MapPost(SuspendPath, SuspendAsync);
group.MapPost(UnsuspendPath, UnsuspendAsync);
group.MapPost(ImpersonatePath, ImpersonateAsync);
return app;
}
private static async Task<IResult> ListAsync(
HttpContext context,
TenantAdminService tenantAdminService,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
IReadOnlyList<TenantListItemDto> items = await tenantAdminService.ListAsync(ct);
return Results.Ok(new { items });
}
private static async Task<IResult> CreateAsync(
OperatorTenantCreateRequest body,
HttpContext context,
TenantAdminService tenantAdminService,
AuditService auditService,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
TenantCreateResultDto result = await tenantAdminService.CreateAsync(body.Name, body.Email, ct);
if (!result.Ok || result.Tenant is null)
{
return result.Error switch
{
TenantCreateResultDto.ErrorInvalidEmail => EndpointResults.BadRequest(InvalidEmailDetail),
TenantCreateResultDto.ErrorEmailTaken => EndpointResults.BadRequest(EmailTakenDetail),
_ => EndpointResults.BadRequest(TenantNameRequiredDetail),
};
}
// Одноразовый пароль владельца в аудит/логи не пишется (правило секретов); raw — только в ответе ниже.
TenantRecordDto createdTenant = result.Tenant;
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.TenantCreated,
AuditActorTypes.Operator,
ActorId: operatorIdentity.OperatorId,
TenantId: createdTenant.Id,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { tenantId = createdTenant.Id, name = createdTenant.Name, email = result.OwnerLogin })), ct);
if (result.OwnerLogin is not null)
{
return Results.Ok(new
{
createdTenant.Id,
createdTenant.Name,
createdTenant.Status,
createdTenant.CreatedAt,
ownerEmail = result.OwnerLogin,
initialPassword = result.InitialPassword,
});
}
return Results.Ok(new { createdTenant.Id, createdTenant.Name, createdTenant.Status, createdTenant.CreatedAt });
}
// GET /api/operator/tenants/{id}: детали тенанта и его пользователи.
private static async Task<IResult> GetByIdAsync(
Guid id,
HttpContext context,
TenantAdminService tenantAdminService,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
TenantDetailDto? tenant = await tenantAdminService.GetAsync(id, ct);
if (tenant is null)
{
return EndpointResults.NotFound(TenantNotFoundDetail);
}
return Results.Ok(tenant);
}
// POST /api/operator/tenants/{id}/suspend: приостановка тенанта; аудит tenant_status_changed.
private static Task<IResult> SuspendAsync(
Guid id,
HttpContext context,
TenantAdminService tenantAdminService,
AuditService auditService,
CancellationToken ct) =>
ApplyStatusAsync(id, TenantStatuses.Suspended, context, tenantAdminService, auditService, ct);
// POST /api/operator/tenants/{id}/unsuspend: возобновление тенанта; аудит tenant_status_changed.
private static Task<IResult> UnsuspendAsync(
Guid id,
HttpContext context,
TenantAdminService tenantAdminService,
AuditService auditService,
CancellationToken ct) =>
ApplyStatusAsync(id, TenantStatuses.Active, context, tenantAdminService, auditService, ct);
// Общая логика suspend/unsuspend: проверка оператора, смена статуса, аудит при реальном изменении.
// id: Идентификатор тенанта.
// status: Новый статус — константа TenantStatuses.
// context: Контекст запроса (операторская сессия, IP).
// tenantAdminService: Сервис реестра тенантов.
// auditService: Сервис аудита (запись tenant_status_changed при изменении).
// ct: Токен отмены.
// Возвращает: 200 {ok,status} или 401/404 {detail}.
private static async Task<IResult> ApplyStatusAsync(
Guid id,
string status,
HttpContext context,
TenantAdminService tenantAdminService,
AuditService auditService,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
TenantStatusChangeResultDto result = await tenantAdminService.ChangeStatusAsync(id, status, ct);
if (!result.Ok || result.Tenant is null)
{
return EndpointResults.NotFound(TenantNotFoundDetail);
}
if (result.Changed)
{
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.TenantStatusChanged,
AuditActorTypes.Operator,
ActorId: operatorIdentity.OperatorId,
TenantId: result.Tenant.Id,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { tenantId = result.Tenant.Id, status = result.Tenant.Status })), ct);
}
return Results.Ok(new { ok = true, status = result.Tenant.Status });
}
// POST /api/operator/tenants/{id}/impersonate: tenant-сессия пользователя тенанта; аудит impersonation_started.
private static async Task<IResult> ImpersonateAsync(
Guid id,
OperatorTenantImpersonateRequest? body,
HttpContext context,
AuthService authService,
AuditService auditService,
IOptions<CookieOptions> cookieOptions,
CancellationToken ct)
{
var operatorIdentity = context.GetCurrentOperator();
if (operatorIdentity is null)
{
return EndpointResults.Unauthorized(AuthHelpers.OperatorUnauthorizedDetail);
}
ImpersonationResultDto result = await authService.ImpersonateAsync(
id, body?.Login, operatorIdentity.OperatorId, ct);
if (!result.Ok || result.SessionToken is null || result.Login is null || result.TenantId is null)
{
return result.Error switch
{
ImpersonationResultDto.ErrorTenantNotFound => EndpointResults.NotFound(TenantNotFoundDetail),
ImpersonationResultDto.ErrorUserNotFound => EndpointResults.NotFound(UserNotFoundInTenantDetail),
_ => EndpointResults.BadRequest(TenantHasNoUsersDetail),
};
}
await auditService.AppendAsync(new AuditRecordDto(
AuditEvents.ImpersonationStarted,
AuditActorTypes.Operator,
ActorId: operatorIdentity.OperatorId,
TenantId: result.TenantId,
Ip: ClientIp(context),
DetailJson: AuditService.ToDetailJson(new { targetLogin = result.Login, tenantId = result.TenantId })), ct);
// Токен — это tenant-сессия (как после /api/auth/login): СТАВИМ ту же httpOnly-куку deal_session
// на ответ, чтобы браузер оператора сразу получил tenant-сессию (JS не может записать httpOnly-куку).
// Завершение — POST /api/auth/logout (пишет impersonation_stopped).
SessionCookieWriter.Append(context, cookieOptions.Value, result.SessionToken);
return Results.Ok(new
{
sessionToken = result.SessionToken,
expiresAt = result.ExpiresAt,
tenantId = result.TenantId,
login = result.Login,
});
}
// IP-адрес клиента для аудита (без порта; null, если недоступен).
// context: Контекст запроса.
// Возвращает: Строковое представление IP или null.
private static string? ClientIp(HttpContext context) => context.Connection.RemoteIpAddress?.ToString();
}
@@ -0,0 +1,153 @@
using Deal.Api.Endpoints.RequestModels;
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Pipeline.Application.Models;
using Deal.Modules.Pipeline.Application.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// Эндпоинты вкладки «Обработка»
/// </summary>
public static class PipelineEndpoints
{
private const string PipelineGroupPrefix = "/api/pipeline";
private const string OpenApiTag = "processing";
// Путь сводки вкладки «Обработка» (GET).
private const string StatsPath = "/stats";
// Путь сырых сообщений очереди (GET).
private const string QueuePath = "/queue";
// Путь страницы отсева (GET).
private const string RejectedPath = "/rejected";
// Путь полной очистки отсева (POST).
private const string RejectedClearPath = "/rejected/clear";
// Путь удаления одной записи отсева (DELETE).
private const string RejectedIdPath = "/rejected/{rejId}";
// Путь возврата записи отсева в обработку (POST).
private const string RejectedReturnPath = "/rejected/{rejId}/return";
private const string RejectedNotFoundDetail = "Запись не найдена";
private const int DefaultPageSize = 100;
/// <summary>
/// Регистрирует группу /api/pipeline
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapPipelineEndpoints(this IEndpointRouteBuilder app)
{
var pipeline = app.MapGroup(PipelineGroupPrefix).WithTags(OpenApiTag);
pipeline.MapGet(StatsPath, StatsAsync);
pipeline.MapGet(QueuePath, QueueAsync);
pipeline.MapGet(RejectedPath, RejectedAsync);
pipeline.MapPost(RejectedClearPath, ClearAsync);
pipeline.MapDelete(RejectedIdPath, DeleteAsync);
pipeline.MapPost(RejectedReturnPath, ReturnAsync);
return app;
}
private static async Task<IResult> StatsAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
PipelineProcessingService processing = context.RequestServices.GetRequiredService<PipelineProcessingService>();
return Results.Ok(await processing.StatsAsync(ct));
}
private static async Task<IResult> QueueAsync(
int? limit,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
PipelineProcessingService processing = context.RequestServices.GetRequiredService<PipelineProcessingService>();
IReadOnlyList<QueueItemDto> items = await processing.ListQueueAsync(limit ?? DefaultPageSize, ct);
QueueCountsDto counts = await processing.QueueCountsAsync(ct);
int rejected = await processing.RejectedCountAsync(ct);
return Results.Ok(new { items, counts, rejected });
}
private static async Task<IResult> RejectedAsync(
string? q,
int? offset,
int? limit,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
PipelineProcessingService processing = context.RequestServices.GetRequiredService<PipelineProcessingService>();
RejectedPageDto page = await processing.ListRejectedAsync(q ?? string.Empty, offset ?? 0, limit ?? DefaultPageSize, ct);
return Results.Ok(page);
}
private static async Task<IResult> ClearAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
PipelineProcessingService processing = context.RequestServices.GetRequiredService<PipelineProcessingService>();
int cleared = await processing.ClearAsync(ct);
return Results.Ok(new { ok = true, cleared });
}
private static async Task<IResult> DeleteAsync(
string rejId,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
PipelineProcessingService processing = context.RequestServices.GetRequiredService<PipelineProcessingService>();
await processing.DeleteAsync(rejId, ct);
return Results.Ok(new { ok = true });
}
private static async Task<IResult> ReturnAsync(
string rejId,
ReturnReasonRequest body,
HttpContext context,
CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
PipelineProcessingService processing = context.RequestServices.GetRequiredService<PipelineProcessingService>();
RejectReturnResultDto? result = await processing.ReturnAsync(rejId, body.Reason ?? string.Empty, ct);
if (result is null)
{
return EndpointResults.NotFound(RejectedNotFoundDetail);
}
return result.Error is not null
? EndpointResults.BadRequest(result.Error)
: Results.Ok(new { id = result.Id, returned = result.Returned, returnedAt = result.ReturnedAtMs });
}
}
@@ -0,0 +1,71 @@
using Deal.Api.Extensions;
using Deal.Api.Services;
using Deal.Modules.Settings.Application.Models;
using Deal.Modules.Settings.Application.Services;
namespace Deal.Api.Endpoints;
/// <summary>
/// HTTP-эндпоинты курсов валют
/// </summary>
public static class RatesEndpoints
{
private const string ApiGroupPrefix = "/api";
// Путь текущих курсов (GET).
private const string RatesPath = "/rates";
// Путь принудительного обновления (POST).
private const string RatesRefreshPath = "/rates/refresh";
private const string OpenApiTag = "settings";
/// <summary>
/// Регистрирует GET /api/rates и POST /api/rates/refresh.
/// </summary>
/// <param name="app">Построитель маршрутов приложения.</param>
/// <returns>Построитель маршрутов для цепочки вызовов.</returns>
public static IEndpointRouteBuilder MapRatesEndpoints(this IEndpointRouteBuilder app)
{
var group = app.MapGroup(ApiGroupPrefix).WithTags(OpenApiTag);
group.MapGet(RatesPath, GetRatesAsync);
group.MapPost(RatesRefreshPath, RefreshRatesAsync);
return app;
}
// GET /api/rates: текущий кэш курсов тенанта (+ ленивый фоновый refresh при необходимости).
private static async Task<IResult> GetRatesAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
// Резолв после 401-гейта: RatesService — scoped на TenantDbContext (tenant-контекст запроса).
RatesService ratesService = context.RequestServices.GetRequiredService<RatesService>();
RatesDto current = await ratesService.GetAsync(ct);
if (await ratesService.ShouldFetchAsync(ct))
{
context.RequestServices.GetRequiredService<RatesRefreshScheduler>().Schedule();
}
return Results.Ok(current);
}
private static async Task<IResult> RefreshRatesAsync(HttpContext context, CancellationToken ct)
{
if (!context.HasUser())
{
return EndpointResults.Unauthorized(AuthHelpers.UnauthorizedDetail);
}
RatesService ratesService = context.RequestServices.GetRequiredService<RatesService>();
// Синхронно: refresh по текущей настройке rateSource; при сбое ЦБ ok=false и кэш не тронут.
bool ok = await ratesService.RefreshAsync(ct);
RatesDto current = await ratesService.GetAsync(ct);
return Results.Ok(new { ok, rates = current });
}
}
@@ -0,0 +1,8 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/cards/{cardId}/links — добавление ссылки карточке.
/// </summary>
/// <param name="Name">Название ссылки; пустое → name = url.</param>
/// <param name="Url">URL ссылки (без схемы — добавится https://).</param>
public sealed record CardLinkRequest(string? Name = null, string? Url = null);
@@ -0,0 +1,6 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/cards/clear-col — полная очистка служебной колонки.
/// </summary>
public sealed record ClearColBody(string? Col);
@@ -0,0 +1,6 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело PATCH /api/containers/{containerId}/state — смена состояния колонки.
/// </summary>
public sealed record ColStateBody(bool? Collapsed, string? Width);
@@ -0,0 +1,6 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/cards/{cardId}/comments — добавление комментария.
/// </summary>
public sealed record CommentBody(string? Text);
@@ -0,0 +1,24 @@
using Deal.Modules.Kanban.Application.Models;
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/containers — создание контейнера.
/// </summary>
/// <param name="Name">Имя контейнера (обязательно).</param>
/// <param name="Description">Описание (опционально).</param>
/// <param name="Color">Цвет (опционально; null — палитра).</param>
/// <param name="Space">Пространство (dashboard/selected; по умолчанию dashboard).</param>
/// <param name="Kind">Вид (board/stage/service/terminal; по умолчанию board).</param>
/// <param name="Suggested">Признак ИИ-предложения.</param>
/// <param name="Rules">Правила попадания.</param>
/// <param name="Note">Заметка/обоснование.</param>
public sealed record ContainerCreateRequest(
string? Name,
string? Description,
string? Color,
string? Space,
string? Kind,
bool? Suggested,
ContainerRulesDto? Rules,
string? Note);
@@ -0,0 +1,24 @@
using Deal.Modules.Kanban.Application.Models;
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело PATCH /api/containers/{id} — частичное обновление контейнера.
/// </summary>
/// <param name="Name">Новое имя (null — не менять).</param>
/// <param name="Description">Новое описание (null — не менять).</param>
/// <param name="Color">Новый цвет (null — не менять).</param>
/// <param name="Collapsed">Новая свёрнутость (null — не менять).</param>
/// <param name="Suggested">Признак ИИ-предложения (null — не менять).</param>
/// <param name="Note">Новая заметка (null — не менять).</param>
/// <param name="Rules">Новые правила (null — не менять).</param>
/// <param name="Policy">Новая политика (null — не менять).</param>
public sealed record ContainerPatchRequest(
string? Name,
string? Description,
string? Color,
bool? Collapsed,
bool? Suggested,
string? Note,
ContainerRulesDto? Rules,
ContainerPolicyDto? Policy);
@@ -0,0 +1,24 @@
using Deal.Modules.Kanban.Application.Models;
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/cards — ручное
/// </summary>
/// <param name="Title">Заголовок карточки (Trim в сервисе; пустой допустим).</param>
/// <param name="Summary">Краткое содержание карточки.</param>
/// <param name="Stack">Стек/направления (null — пустой стек).</param>
/// <param name="Budget">Бюджет (from/to/cur); null — бюджета нет.</param>
/// <param name="Contact">Контактная строка карточки.</param>
/// <param name="TzText">Текст технического задания.</param>
/// <param name="ContainerId">Желаемый контейнер; null/неизвестный → planned.</param>
/// <param name="Stage">Алиас containerId (совместимость со старым фронтом).</param>
public sealed record CreateCardRequest(
string Title = "",
string Summary = "",
IReadOnlyList<string>? Stack = null,
CardBudgetDto? Budget = null,
string Contact = "",
string TzText = "",
string? ContainerId = null,
string? Stage = null);
@@ -0,0 +1,49 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/discovery/tasks.
/// </summary>
public sealed record DiscoveryTaskCreateBody
{
/// <summary>
/// Название задачи
/// </summary>
public string Name { get; init; } = string.Empty;
/// <summary>
/// Описание ниши/цели
/// </summary>
public string? Description { get; init; }
public IReadOnlyList<string>? Keywords { get; init; }
/// <summary>
/// Минимальное число участников источника; null → 0.
/// </summary>
public int? MinSubscribers { get; init; }
/// <summary>
/// Язык источников
/// </summary>
public string? Lang { get; init; }
/// <summary>
/// Порог подходящих сообщений оценки, %
/// </summary>
public int? Threshold { get; init; }
/// <summary>
/// Размер выборки сообщений оценки
/// </summary>
public int? SampleSize { get; init; }
/// <summary>
/// План авто-вступлений
/// </summary>
public int? PlanJoins { get; init; }
/// <summary>
/// Авто-вступления воркером; null → false.
/// </summary>
public bool? AutoJoin { get; init; }
}
@@ -0,0 +1,52 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело PATCH /api/discovery/tasks/{task_id}.
/// </summary>
public sealed record DiscoveryTaskPatchBody
{
/// <summary>
/// Новое название.
/// </summary>
public string? Name { get; init; }
/// <summary>
/// Новое описание
/// </summary>
public string? Description { get; init; }
/// <summary>
/// Новые ключевые слова
/// </summary>
public IReadOnlyList<string>? Keywords { get; init; }
/// <summary>
/// Новый минимум участников
/// </summary>
public int? MinSubscribers { get; init; }
/// <summary>
/// Новый язык: «ru»|«any»
/// </summary>
public string? Lang { get; init; }
/// <summary>
/// Новый порог оценки, %
/// </summary>
public int? Threshold { get; init; }
/// <summary>
/// Новый размер выборки
/// </summary>
public int? SampleSize { get; init; }
/// <summary>
/// Новый план авто-вступлений
/// </summary>
public int? PlanJoins { get; init; }
/// <summary>
/// Новый флаг авто-вступлений
/// </summary>
public bool? AutoJoin { get; init; }
}
@@ -0,0 +1,6 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/cards/mark-col-seen — снять «новое» с колонки.
/// </summary>
public sealed record MarkColBody(string? Col);
@@ -0,0 +1,6 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/cards/{lead_id}/move — перенос карточки.
/// </summary>
public sealed record MoveBody(string? To);
@@ -0,0 +1,8 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело PUT /api/operator/settings/telegram-keys
/// </summary>
/// <param name="ApiId">api_id приложения Telegram (5..9 цифр); null — не менялось.</param>
/// <param name="ApiHash">api_hash приложения Telegram (непустой секрет; хранится зашифрованным); null — не менялось.</param>
public sealed record OperatorTelegramKeysRequest(string? ApiId, string? ApiHash);
@@ -0,0 +1,8 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/containers/reorder — новый порядок контейнеров пространства.
/// </summary>
/// <param name="Space">Пространство (dashboard/selected); null — dashboard.</param>
/// <param name="Order">Id контейнеров в новом порядке.</param>
public sealed record OrderBody(string? Space, IReadOnlyList<string>? Order);
@@ -0,0 +1,6 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/cards/reclassify — ИИ-переклассификация «Неразобранного».
/// </summary>
public sealed record ReclassifyBody(IReadOnlyList<string>? Ids);
@@ -0,0 +1,7 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/cards/{cardId}/reminder — установка напоминания hold-карточке.
/// </summary>
/// <param name="At">Время напоминания, epoch-ms.</param>
public sealed record ReminderSetRequest(long? At);
@@ -0,0 +1,6 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/pipeline/rejected/{rejId}/return — причина возврата в обработку.
/// </summary>
public sealed record ReturnReasonRequest(string? Reason);
@@ -0,0 +1,8 @@
namespace Deal.Api.Endpoints.RequestModels;
/// <summary>
/// Тело POST /api/cards/take — «взять в работу» карточки с дашборда.
/// </summary>
/// <param name="CardId">Id карточки, берущейся в работу.</param>
/// <param name="LeadId">Алиас cardId.</param>
public sealed record TakeCardRequest(string? CardId = null, string? LeadId = null);

Some files were not shown because too many files have changed in this diff Show More