Максим: да как раз там тоже трафик превышен, сервер на softlayer.
но я думаю попробовать s3cmd позже и проверить измениться ли результат.
А rclone использовал как удобное решение для разных типов источников, тк использовал и s3,swift и локальное хранилище... когда все было в одном сервисе не чувствовался трафик тк шел внутри приватной сети.
Максим: еще похоже нашел возможную причину, это то что я данные отправлял с помощью rclone... увидел по логам что он напрямую зачем-то при отправке делает кучу GET запросов, может в этом дело. Разбираюсь. Тут отписал подробнее https://github.com/ncw/rclone/issues/976
Максим: я проверил насчет регионов... у CDN нет региональной привязки, тк похоже что в этом и суть)) выбрать регион там не возможно вообще для cloudfront.
Вот значит гдето напрямую ходит трафик с s3... и как его вычислить? запрятить напрямую можно?
я может туплю простите, но опять же есть cloudfront трафик в 367Гб, а есть еще какой-то трафик без него в 1,1Тб... Почему если весь трафик идет через cloudfront не записывается туда? Может у меня какой ресурс напрямую дергается без cloudfront?
Роман Мирр: если сдвинули будет похожии... даже если повернули немного, и если сняли немного под другим углом, цветом. Это сейчас получается с помощью векторов vgg16 делать, не идеально... но получается.
спасибо, интересно. но есть да свои минусы судя по статье... ищет только дубликаты или часть а не похожии. и скорость вроде тоже не очень быстрая. У вас какая скорость?
Надо отклик в не более 1-2 секунд в идеале
спасибо за ответ, да примерно так и думали вначале... но показалось сложно слишком, искали вариант попроще...типа NearPy.
планируются в будущем кластеризовать базу (обувь, футболка и тп) это бы снизило сложность. будем пробовать да, работы с этим похоже будет много)
Спасибо за комментарий подробный. Все правильно, ИИ не сможет делать прокатный фильм или сводить звук и тп. Мы как раз сейчас делаем по простому, определяем движения и лица. Сделали прототип, вот работы up.lifefilm.ru/newfilms.html . Мы делаем больше музыкальные клипы. Принципы киномонтажа нужны чтоб правильно сложить кусочки видео, более умно)
спасибо, да видел анонс их технологии. но там больше анализ по движению и у них есть данные с разных камер и данные акселерометра. У нас больше киномонтаж, истории. У нас данные с одной камеры без данных по положению в пространстве. Нужно больше чем просто набор картинок. Учитывать разные планы, крупности... Заменить как бы монтаж человеком. Заставить составлять истории...
но я думаю попробовать s3cmd позже и проверить измениться ли результат.
А rclone использовал как удобное решение для разных типов источников, тк использовал и s3,swift и локальное хранилище... когда все было в одном сервисе не чувствовался трафик тк шел внутри приватной сети.