//Логи сервисов приложения  

data-transformer.log
discovery.log
file-storage.log
gateway.log
logstash.log
manager.log
notifications.log
renderer.log

//Логи коннекторов к БД  
database-clickhouse.log
database-mssql.log
database-mysql.log
database-oracle.log
database-postgres.log
database-vertica.log
database-ydb.log  

//Логи коннекторов к файловым источникам
file-csv.log
file-json.log
file-xlsx.log
file-xml.log

//Логи коннектора к источнику Polymatica Analytics

polymatica-analytics.log

//Логи коннектора к источнику Р7-Office
r7-office.log

//Лог действий пользователей в приложении

filtered_user.log

1. ChangePassword – Изменение пароля
2. ComponentCreate – Создание компонента
3. ComponentDelete – Удаление компонента
4. ComponentEdit – Изменение настроек компонента
5. DatasetCreate – Создание датасета
6. DatasetDelete – Удаление датасета
7. DatasetEdit – Изменение настроек датасета
8. DatasetUpdateData – Обновление данных датасета
9. DatasourceCreate – Создание источника
10. DatasourceDelete – Удаление источника
11. DatasourceEdit – Изменение настроек источника
12. FilterCreate – Создание фильтра
13. FilterDelete – Удаление фильтра
14. FilterUpdate – Изменение настроек фильтра
15. GlobalThemeCreate – Создание глобальной темы
16. GlobalThemeDelete – Удаление глобальной темы
17. GlobalThemeReset – Сброс глобальной темы
18. GlobalThemeSelect – Применение глобальной темы
19. GlobalThemeUpdate – Обновление глобальной темы
20. GroupCreate – Создание группы
21. GroupDelete – Удаление группы
22. GroupEdit – Изменение настроек группы
23. GroupRightEdit - Изменение прав группы
24. LayerCreate – Создание слоя
25. LayerDelete – Удаление слоя
26. LayerEdit – Изменение настроек слоя
27. Login – Авторизация пользователя
28. Logout – Выход пользователя из системы
29. ProjectCreate – Создание проекта
30. ProjectDelete – Удаление проекта
31. ProjectEdit – Изменение настроек проекта
32. ProjectViewed – Просмотр проекта
33. RoleCreate – Создание роли
34. RoleDelete – Удаление роли
35. RoleEdit – Изменение настроек роли
36. ScheduleCreate – Создание расписания автообновления данных датасета
37. ScheduleDelete – Удаление расписания автообновления данных датасета
38. ScheduleEdit – Изменение настроек расписания автообновления данных датасета
39. ShareCreate - Создание ссылки с общим доступом
40. ShareEdit - Изменение ссылки с общим доступом
41. ShareDelete - Удаление ссылки с общим доступом
42. SVGCreate – Создание объекта SVG
43. SVGDelete – Удаление объекта SVG
44. SVGEdit – Изменение настроек объекта SVG
45. ThemeCreate – Создание темы оформления
46. ThemeDelete –  Удаление темы оформления
47. ThemeEdit – Изменение настроек темы оформления
48. UserCreate – Создание пользователя
49. UserDelete – Удаление пользователя
50. UserEdit – Изменение настроек пользователя
51. UserRightEdit - Изменение прав пользователя
52. WidgetCreate – Создание виджета.
53. WidgetDelete – Удаление виджета.
54. WidgetEdit – Изменение настроек виджета

Datetime:1733382611414	instanceID:25	logLevel:info	message:incoming request | StatusCode=200 | Method=POST | Path=/api/module/v1/authentication	serviceName:manager	serviceVersion:2.4.0	tag:system_log	time:2024-12-05 07:10:11.41618714 +0000 UTC m=+154977.985449348	traceId:ed976b3433a11c5054d20de3afb40ea7

Datetime:1733356806764	instanceID:25	logLevel:info	message: client request | Duration=948.301µs | Status=200 OK | RemoteAddr=0.0.0.0:9600 | Method=PUT | URL=http://discovery:9610/api/module/v1/discovery/database-mssql | ResponseBody= 	serviceName:database-mssql	serviceVersion:2.7.0	tag:system_log	time:2024-12-05 00:00:06.765309546 +0000 UTC m=+129173.334571722	traceId:02ffe00a93d6c685a44a5bba25a7cec4

Datetime:1.733382611425e+12	clientIP:192.168.10.100	instanceID:25	name:UserRightEdit	params:[map[name:action_author value:kasyanovalo] map[name:get_access_user_id value:224997] map[name:get_access_user_login value:kasyanovalo] map[name:entity_id value:123716] map[name:entity_type value:project] map[name:entity_name value:Исходный проект] map[name:access_right value:2]]	remote:0.0.0.0:9600	serviceName:manager	serviceVersion:2.4.0	sessionID:600952	tag:user_log	tags:[Username Right]	time:2024-12-05 07:10:11.426164833 +0000 UTC m=+154977.995427012	userID:224997	userLogin:kasyanovalo

action:UserRightEdit	client_ip:	create_date:2024-12-05T07:10:11.426164Z	id:6.976287e+06	module_name:manager	params:<nil> remote:0.0.0.0:9600	session_id:	user_id:224997

Обратите внимание, что:

• данные для отображения лога в интерфейса берутся из общего user_log.log;
• сокращенное отображение лога, выгруженного из интерфейса, является временным и будет исправлено в будущих версиях приложения.

{
  "inputs": [
    ...
  ],
  "parsers": [
    ...
  ],
  "outputs": [
    ...
  ]
}

{
// Откуда поступает сообщение
   "inputs": [ 
    {
      "name": "rabbitmq", // Сообщение поступает из ПО RabbitMQ
      "tag": "user_log", // Сообщению присваивается тэг user_log
 
// Сообщение передается сервису logstash для записи в лог действий пользователя 
       "queue": {
         "name": "logstash.service.users" 
      },
      "exchange": {
        "name": "logstash"
      },
      "routing_key": "logstash.*.users"
    },
   
    {
      "name": "rabbitmq", // Сообщение поступает из ПО RabbitMQ
      "tag": "system_log", // Сообщению присваивается тэг system_log       

 //Сообщение передается сервису logstash для записи в лог действий сервисов/коннекторов
 	"queue": {
        "name": "logstash.service.system"
      },
      "exchange": {
        "name": "logstash"
      },
      "routing_key": "logstash.*.system"
    }
  ],

 // Чем обрабатывается сообщение 
   "parsers": [      

	// Сообщение с тэгом system_log обрабатывается регулярным выражением, приведенным в поле "format" 
	{
      "name": "regex",
      "tag": "system_log",
      "format": "time=\"$_\" logLevel=$logLevel message=\"$message\" Datetime=$Datetime instanceID=$instanceID serviceName=$serviceName serviceVersion=$serviceVersion traceId=$traceId"
    },     
	
    // Сообщение с тэгом user_log обрабатывается парсером JSON
	{
      "name": "json",
       "tag": "user_log"
    }
  ],

// Куда и в каком виде выводится сообщение
  "outputs": [
    {
      "name": "stdout",
      "tag": "system_log",
      "format": {
        "name": "ltsv",
        "pairs_delimiter": ":",
        "value_delimiter": "\t" // Сообщения с тэгом system_log будут выводиться в стандартный вывод Linux после обработки форматтером ltsv. Пары ключ-значение разделяются ":", отделяются друг от друга табуляцией. 
      }
    },
    {
      "name": "file",
      "tag": "user_log",
      "format": {
        "name": "ltsv" // Сообщение с тэгом user_log будет выводиться в файл после обработки форматтером ltsv.       
    }
    },
    {
      "name": "file",
      "tag": "system_log",
      "file_name_from_field": "serviceName",  // Cообщения с тэгом system_log также будут выводиться в файл, для чего форматтер ltsv будет брать имя сервиса из поля serviceName.         
       "format": {
        "name": "ltsv"
      }
    },
    {
      "name": "postgresql", // Сообщения с тэгом user_log также будут записаны в таблицу PostgreSQL с нижеуказанными колонками.
      "tag": "user_log",
      "table": "logging",
      "columns": {
        "time": "create_date",
        "serviceName": "module_name",
        "name": "action",
        "remote": "remote",
        "userID": "user_id",
        "params": "params",
        "clientIP": "client_ip",
        "sessionID": "session_id"
      }
    }
  ]
}