mirror of
https://github.com/snapotter-hq/SnapOtter.git
synced 2026-08-03 07:46:42 +02:00
A release-readiness QA pass over the whole product. The commits split into defects a user would hit and gates that were reporting green while measuring nothing. ## Fixes that change behaviour Rate limiting was bypassable on every install: TRUST_PROXY defaulted to true, so request.ip came from a client-set header and a forged X-Forwarded-For got past the login limiter. The default is now a private-network trust list. A transient Postgres outage stranded in-flight jobs, leaving finished output on disk with no row pointing at it. A reconciler now resolves those rows and adopts the bytes rather than dropping the work. A Redis connection that moved to a new address wedged every read-blocked consumer, so completions stopped signalling while health still answered 200. Socket timeouts plus subscriber pings recover it. Installing more than one AI bundle left the shared venv multi-versioned and silently broke three tools. The installer now reconciles distributions to one version each. Converting an image to JXL at quality 1 through 4 returned a 500, because libjxl 0.7 rejects the distance those values compute. The quality is floored at what the encoder honours. A missing ffmpeg was also reported to the user as a corrupt upload; it now says the engine is unavailable. RAW uploads reached an unpatched LibRaw on arm64, so it is built from source at 0.22.2, and the release scan was split so it can fail on an unfixed critical instead of hiding it behind ignore-unfixed. ## Gates that could not fail Two mutation lanes ran zero mutants because Stryker crawled the gitignored docs build; coverage discarded its whole report on any failing test; the lint gate skipped root tests, scripts, and two workspaces; and several generated matrices counted a host missing ffmpeg as a passing tool. Each now measures what it claims. Full evidence and the outstanding release items are tracked locally and are not part of this branch.
206 lines
12 KiB
Markdown
206 lines
12 KiB
Markdown
---
|
||
description: "Схема базы данных PostgreSQL, таблицы, миграции и процедуры резервного копирования для SnapOtter."
|
||
i18n_source_hash: a68264552836
|
||
i18n_provenance: machine
|
||
i18n_output_hash: b97e8f6d09ef
|
||
i18n_hash_version: 2
|
||
---
|
||
|
||
# База данных {#database}
|
||
|
||
SnapOtter использует PostgreSQL 17 с [Drizzle ORM](https://orm.drizzle.team/) (pg-core / node-postgres) для хранения данных. Схема определена в `apps/api/src/db/schema.ts`.
|
||
|
||
Подключение настраивается через переменную окружения `DATABASE_URL` (по умолчанию `postgres://snapotter:snapotter@postgres:5432/snapotter`). В Docker Compose контейнер Postgres хранит свои данные в именованном томе `SnapOtter-pgdata`.
|
||
|
||
## Таблицы {#tables}
|
||
|
||
### users {#users}
|
||
|
||
Хранит учётные записи пользователей. Создаётся автоматически при первом запуске из `DEFAULT_USERNAME` и `DEFAULT_PASSWORD`.
|
||
|
||
| Столбец | Тип | Примечания |
|
||
|---|---|---|
|
||
| `id` | uuid | Первичный ключ |
|
||
| `username` | varchar | Уникальный, обязательный |
|
||
| `passwordHash` | varchar | scrypt-хеш |
|
||
| `role` | varchar | `admin`, `editor` или `user` |
|
||
| `mustChangePassword` | boolean | Флаг принудительного сброса пароля |
|
||
| `createdAt` | timestamp | Время создания |
|
||
| `updatedAt` | timestamp | Время последнего обновления |
|
||
|
||
### sessions {#sessions}
|
||
|
||
Активные сессии входа. Каждая строка связывает токен сессии с пользователем.
|
||
|
||
| Столбец | Тип | Примечания |
|
||
|---|---|---|
|
||
| `id` | varchar | Первичный ключ (токен сессии) |
|
||
| `userId` | uuid | Внешний ключ к `users.id` |
|
||
| `expiresAt` | timestamp | Время истечения |
|
||
| `createdAt` | timestamp | Время создания |
|
||
|
||
### teams {#teams}
|
||
|
||
Группы для организации пользователей. Администраторы могут назначать пользователей в команды.
|
||
|
||
| Столбец | Тип | Описание |
|
||
|--------|------|-------------|
|
||
| `id` | uuid | Первичный ключ |
|
||
| `name` | varchar (уникальный, макс. 50 символов) | Название команды |
|
||
| `createdAt` | timestamp | Время создания |
|
||
|
||
### api_keys {#api-keys}
|
||
|
||
API-ключи для программного доступа. Необработанный ключ показывается один раз при создании; хранится только хеш.
|
||
|
||
| Столбец | Тип | Примечания |
|
||
|---|---|---|
|
||
| `id` | uuid | Первичный ключ |
|
||
| `userId` | uuid | Внешний ключ к `users.id` |
|
||
| `keyHash` | varchar | scrypt-хеш ключа |
|
||
| `name` | varchar | Метка, заданная пользователем |
|
||
| `createdAt` | timestamp | Время создания |
|
||
| `lastUsedAt` | timestamp | Обновляется при каждом аутентифицированном запросе |
|
||
|
||
Ключи имеют префикс `si_`, за которым следуют 96 hex-символов (48 случайных байт).
|
||
|
||
### pipelines {#pipelines}
|
||
|
||
Сохранённые цепочки инструментов, которые пользователи создают в интерфейсе.
|
||
|
||
| Столбец | Тип | Примечания |
|
||
|---|---|---|
|
||
| `id` | uuid | Первичный ключ |
|
||
| `name` | varchar | Название пайплайна |
|
||
| `description` | varchar | Необязательное описание |
|
||
| `steps` | jsonb | Массив объектов `{ toolId, settings }` |
|
||
| `createdAt` | timestamp | Время создания |
|
||
|
||
### user_files {#user-files}
|
||
|
||
Постоянная библиотека файлов. По умолчанию сохранённое изменение вставляется как независимая корневая строка («сохранить как новый»: `version` 1, `parentId` null, поэтому оригинал остаётся в списке) или как связанная с родителем версия, когда вы перезаписываете оригинал (`parentId` задан, `version` увеличивается, вытесняя его). Столбец `toolChain` записывает применённые инструменты.
|
||
|
||
| Столбец | Тип | Описание |
|
||
|--------|------|-------------|
|
||
| `id` | uuid | Первичный ключ |
|
||
| `userId` | uuid | FK к users (CASCADE DELETE) |
|
||
| `originalName` | varchar | Имя исходного загруженного файла |
|
||
| `storedName` | varchar | Имя файла на диске |
|
||
| `mimeType` | varchar | MIME-тип |
|
||
| `size` | integer | Размер файла в байтах |
|
||
| `width` | integer | Ширина изображения в px |
|
||
| `height` | integer | Высота изображения в px |
|
||
| `version` | integer | Номер версии (1 = оригинал) |
|
||
| `parentId` | uuid или null | FK к user_files (родительская версия) |
|
||
| `toolChain` | jsonb | ID инструментов, применённых по порядку для создания этой версии |
|
||
| `createdAt` | timestamp | Время создания |
|
||
|
||
### jobs {#jobs}
|
||
|
||
Отслеживает задачи обработки для отчётности о прогрессе и очистки.
|
||
|
||
| Столбец | Тип | Примечания |
|
||
|---|---|---|
|
||
| `id` | uuid | Первичный ключ |
|
||
| `type` | varchar | Идентификатор инструмента или пайплайна |
|
||
| `status` | varchar | `queued`, `processing`, `completed` или `failed` |
|
||
| `progress` | real | Доля от 0.0 до 1.0 |
|
||
| `inputFiles` | jsonb | Массив путей к входным файлам |
|
||
| `outputPath` | varchar | Путь к файлу результата |
|
||
| `settings` | jsonb | Использованные настройки инструмента |
|
||
| `error` | varchar | Сообщение об ошибке при сбое |
|
||
| `createdAt` | timestamp | Время создания |
|
||
| `completedAt` | timestamp | Время завершения |
|
||
|
||
### settings {#settings}
|
||
|
||
Хранилище «ключ-значение» для общесерверных настроек, которые администраторы могут менять из интерфейса.
|
||
|
||
| Столбец | Тип | Примечания |
|
||
|---|---|---|
|
||
| `key` | varchar | Первичный ключ |
|
||
| `value` | varchar | Значение настройки |
|
||
| `updatedAt` | timestamp | Время последнего обновления |
|
||
|
||
### roles {#roles}
|
||
|
||
Пользовательские роли с гранулярными разрешениями.
|
||
|
||
| Столбец | Тип | Примечания |
|
||
|---|---|---|
|
||
| `id` | uuid | Первичный ключ |
|
||
| `name` | varchar | Уникальное имя роли |
|
||
| `description` | varchar | Необязательное описание |
|
||
| `permissions` | jsonb | Массив строк разрешений |
|
||
| `createdAt` | timestamp | Время создания |
|
||
|
||
### audit_log {#audit-log}
|
||
|
||
Журнал действий, значимых для безопасности.
|
||
|
||
| Столбец | Тип | Примечания |
|
||
|---|---|---|
|
||
| `id` | uuid | Первичный ключ |
|
||
| `userId` | uuid | FK к users |
|
||
| `action` | varchar | Тип действия |
|
||
| `details` | jsonb | Данные, специфичные для действия |
|
||
| `createdAt` | timestamp | Время действия |
|
||
|
||
### user_preferences {#user-preferences}
|
||
|
||
Состояние интерфейса для каждого пользователя, ключом служит имя настройки. Хранит закреплённые инструменты главной страницы, которые записываются через `PUT /api/v1/preferences`.
|
||
|
||
| Столбец | Тип | Примечания |
|
||
|---|---|---|
|
||
| `userId` | text | FK к users, каскадное удаление. Первичный ключ вместе с `key` |
|
||
| `key` | text | Имя настройки. Первичный ключ вместе с `userId` |
|
||
| `value` | jsonb | Содержимое настройки |
|
||
| `updatedAt` | timestamp | Время последней записи |
|
||
|
||
## Миграции {#migrations}
|
||
|
||
Drizzle управляет миграциями схемы. Файлы миграций находятся в `apps/api/drizzle/`. Во время разработки:
|
||
|
||
```bash
|
||
cd apps/api
|
||
npx drizzle-kit generate # generate a migration from schema changes
|
||
npx drizzle-kit migrate # apply pending migrations
|
||
```
|
||
|
||
В продакшене ожидающие миграции применяются автоматически при запуске.
|
||
|
||
## Резервное копирование и восстановление {#backup-and-restore}
|
||
|
||
Реляционная база данных находится в томе `SnapOtter-pgdata` контейнера Postgres, а не в томе `/data` приложения.
|
||
|
||
**Логическая резервная копия с проверкой (рекомендуется)**
|
||
|
||
```bash
|
||
# Dump into PostgreSQL's portable custom archive format
|
||
docker exec SnapOtter-postgres \
|
||
pg_dump --format=custom --no-owner -U snapotter snapotter > snapotter.dump
|
||
test -s snapotter.dump
|
||
docker exec -i SnapOtter-postgres pg_restore --list < snapotter.dump >/dev/null
|
||
|
||
# Restore into a fresh/disposable target first and fail on the first SQL error
|
||
docker exec -i SnapOtter-postgres \
|
||
pg_restore --exit-on-error --clean --if-exists --no-owner \
|
||
-U snapotter -d snapotter < snapotter.dump
|
||
```
|
||
|
||
Этот дамп базы данных не содержит сохраненных объектов библиотеки в `/data/files` или устойчивого состояния BullMQ в Redis. Создайте резервные копии и восстановите их, выполнив согласованную процедуру в разделе [Безопасность и усиление защиты](/ru/guide/security#backup-and-recovery).
|
||
|
||
**Снимок холодного тома**
|
||
|
||
```bash
|
||
# Stop every service first, then use your storage platform to snapshot the
|
||
# PostgreSQL, app-data, and Redis volumes as one crash-consistent set.
|
||
docker compose -f docker/docker-compose.yml stop
|
||
```
|
||
|
||
Не копируйте действующий каталог данных PostgreSQL с помощью `tar`. Составляйте префиксы имен томов по проектам, поэтому разрешайте идентификаторы подключенных томов из `docker inspect` или вашей платформы хранения, а не принимайте буквальную метку `SnapOtter-pgdata`.
|
||
|
||
### Миграция с 1.x (SQLite) {#migrating-from-1-x-sqlite}
|
||
|
||
Обновление со SnapOtter 1.x описано в отдельном руководстве: см. [Обновление с 1.x до 2.0](./upgrading). Вкратце: переиспользуйте существующий том `/data`, и 2.0 автоматически обнаружит и импортирует `/data/snapotter.db` при первом запуске (или задайте `SQLITE_MIGRATE_PATH`, чтобы явно указать путь к нему). Сначала сделайте резервную копию всего тома `/data`, а не только `snapotter.db`: 1.x использует режим SQLite WAL, поэтому остановленный контейнер часто оставляет большую часть данных в `snapotter.db-wal` рядом с почти пустым `snapotter.db`.
|