💾 Домашний NAS: от ручного поиска дублей к локальному агенту
💾 Домашний NAS: от ручного поиска дублей к локальному агенту В предыдущем посте я обещал рассказать о переносе архива из облака и с шести внешних дисков, поиске дублей и резервном копировании. Сразу закрою тему резервного копирования. За отказоустойчивость отвечает RAID 1, а раз в месяц я подключаю внешний диск на 4 ТБ и копирую на него данные. В остальное время он хранится отдельно и служит холодным бэкапом. А поиск дублей оказался достоин отдельной публикации. Большую часть места в семейном архиве занимают фотографии и видео, поэтому начал с них. По мере усложнения задачи приходилось совершенствовать и инструменты. Этап 1. Папки-дубликаты. В Synology Photos я находил целые папки с повторами, сравнивал названия, количество файлов и объём, а затем выборочно проверял около десяти фотографий. Если всё совпадало — удалял папку-дубликат целиком. Этап 2. Дубли внутри папок. Полных копий почти не осталось, но одни и те же группы фотографий встречались в разных каталогах. Такая проверка требовала больше внимания и времени, но позволила убрать основной объём очевидных дублей. Всего с начала разбора архива я освободил уже около 1,4 ТБ. Затем наступила пауза. Дальнейшая очистка всё больше напоминала хирургическую работу: совпадения становились менее очевидными, а искать их вручную было слишком долго. Этап 3. LLM и скрипты. Параллельно я изучал, как модели и агенты повышают личную эффективность. Они предлагали подходы и помогали писать скрипты, но запуск и проверка каждого шага требовали моего участия. При этом новых совпадений находилось уже не так много. Этап 4. Локальный агент. 🤖 Я развернул его внутри домашней сети. Он подключается к NAS, анализирует архив и ищет закономерности, которые трудно заметить вручную. Например, агент обнаружил множество одинаковых фотографий с разными схемами именования: в одном случае — понятное человеку название, в другом — автоматически сгенерированное системой. Нашлись и другие нетривиальные сочетания дублей. После моей проверки файлы отправлялись в корзину. Сейчас я продолжаю совершенствовать инструменты поиска и свою работу с ними. Следующая задача — поиск визуально похожих фотографий: серий, соседних ракурсов, обрезанных или пересохранённых кадров. Здесь агент сможет отобрать кандидатов, но окончательное решение всё равно останется за человеком. Вопрос к вам: Какие инструменты вы используете для поиска не идентичных, а визуально похожих фотографий? Буду рад советам. 🙏 #NAS #Xpenology #Synology #данные #дубликаты #личныйопыт #ИИ