در یک کنسرت، مسابقه ورزشی یا حتی یک دورهمی خانوادگی، معمولا یک نفر بیشتر از بقیه اهمیت دارد و دوست داریم تمام ویدئو روی او متمرکز باشد. اما هنگام فیلم‌برداری همیشه نمی‌شود دوربین را دقیق روی همان فرد نگه داشت؛ مخصوصا وقتی سوژه مدام در حال حرکت است یا میان جمعیت گم می‌شود.
سامسونگ در نسل جدید گوشی‌های تاشوی Galaxy Z قابلیتی به نام My FanCam معرفی کرده است که بعد از پایان فیلم‌برداری امکان تمرکز روی سوژه مورد نظر را به کاربران می‌دهد. برای استفاده از این قابلیت کافی است فرد مورد نظر را در ویدئو انتخاب کنید تا هوش مصنوعی او را در ادامه فیلم شناسایی و دنبال کند و نسخه‌ای از ویدئو را ایجاد کند که تمرکز آن روی همان فرد باشد.
ایده ساخت My FanCam
ایده My FanCam از محبوبیت ویدئوهای FanCam در شبکه‌های اجتماعی شکل گرفت، اما کاربرد این قابلیت به ویدئوهای طرفداران خواننده‌ها و بازیگران محدود نمی‌شود. کاربران می‌توانند از آن در ویدئوهای خانوادگی و جشن تولد، مسابقات ورزشی و تمرین‌های باشگاه یا حتی فیلم‌های قدیمی استفاده کنند.
هدف از طراحی My FanCam این بود که ساخت چنین ویدئوهایی برای کاربران ساده‌تر شود و کاربران به جای اینکه هنگام فیلم‌برداری دائما سوژه را دنبال کنند یا بعدا زمان زیادی برای ویرایش فیلم بگذارند، بتوانند فرد مورد نظر را انتخاب کرده و ویدئویی با تمرکز روی او داشته باشند.
هوانگ‌پیل پارک، از تیم فناوری تصویری مرکز تحقیقات سامسونگ (Samsung Research)، درباره این فناوری می‌گوید: «هسته اصلی My FanCam یک مدل هوش مصنوعی است که افراد را در ویدئو شناسایی و حرکت آن‌ها را دنبال می‌کند. این مدل ویژگی‌های ظاهری و موقعیت هر فرد را در تصویر تشخیص می‌دهد و با به‌خاطر سپردن این اطلاعات، می‌تواند همان شخص را در فریم‌های بعدی نیز پیدا کند. ما عملکرد این مدل را در شرایط مختلف، از جمله حرکت سریع افراد یا قرار گرفتن موقت آن‌ها پشت افراد دیگر، آزمایش کردیم و با بهینه‌سازی فناوری ردیابی، دقت آن را بهبود دادیم.»
چگونه سوژه در ویدئو دنبال می‌شود؟
یکی از ویژگی‌های My FanCam این است که لازم نیست از همان ابتدا مشخص کنید می‌خواهید ویدئو روی چه کسی متمرکز باشد. می‌توانید ویدئو را به‌طور معمول ضبط کنید و اگر فرد موردنظر چند ثانیه بعد وارد قاب شد یا در میانه ویدئو به‌وضوح دیده شد، همان‌جا او را انتخاب کنید. از همان نقطه، My FanCam سوژه را شناسایی و دنبال می‌کند و تمرکز ویدئو را روی او قرار می‌دهد. حتی می‌توانید نسبت تصویر را تغییر دهید و نسخه‌ای از ویدئو که تمرکز بیشتری روی همان فرد دارد را داشته باشید؛ بنابراین اگر هنگام فیلم‌برداری سوژه همیشه در مرکز قاب نبوده، می‌توانید بعدا ویدئو را متناسب با چیزی که می‌خواهید تنظیم کنید.
یکی دیگر از ویژگی‌های My FanCam، شناسایی همزمان افراد حاضر در ویدئو است. سیستم در مرحله تحلیل اولیه، افراد مختلف در ویدئو را شناسایی می‌کند؛ بنابراین اگر بعدا تصمیم بگیرید ویدئو را روی شخص دیگری متمرکز کنید، لازم نیست کل ویدئو دوباره پردازش شود، می‌توانید سوژه موردنظر را تغییر دهید و نتیجه را بلافاصله ببینید.
چالش‌های توسعه ردیابی سوژه
برای اینکه My FanCam در موقعیت‌های مختلف عملکرد قابل اعتمادی داشته باشد، سامسونگ آن را فقط در محیط آزمایشگاهی بررسی نکرد. تیم‌های توسعه این قابلیت را با ویدئوهای واقعی و شرایط متنوع آزمایش کردند؛ از حرکت سریع افراد گرفته تا زمانی که چند نفر از مقابل یکدیگر عبور می‌کنند یا سوژه برای لحظاتی پشت فرد دیگری قرار می‌گیرد. تیم مرکز تحقیقات سامسونگ با بررسی این نمونه‌ها توانست علت خطاها را شناسایی و مدل هوش مصنوعی و روش‌های ردیابی را اصلاح کند. تغییرات انجام‌شده نیز دوباره در محیط واقعی محصول بررسی شد تا عملکرد این فناوری بهبود پیدا کند.
اجرای هوش مصنوعی روی خود گوشی
پردازش My FanCam نیز به سرورهای ابری وابسته نیست و تمام فرایند روی خود گوشی انجام می‌شود. همین موضوع یکی از چالش‌های فنی این قابلیت بوده است، زیرا پردازش ویدئوهای طولانی به توان پردازشی بیشتری نیاز دارد که می‌تواند روی سرعت، مصرف انرژی و دمای دستگاه تاثیرگذار باشد. برای حل این مسئله، سامسونگ علاوه بر بهینه‌سازی مدل هوش مصنوعی، فرایندهایی مانند رمزگشایی ویدئو، انتقال داده و تحلیل اطلاعات را نیز بهینه کرده است تا بار پردازشی واردشده به گوشی کاهش پیدا کند.
My FanCam در چه موقعیت‌هایی کاربرد دارد؟
کاربرد My FanCam به ویدئوهای کنسرت محدود نیست. این قابلیت می‌تواند برای ویدئوهای خانوادگی، سفر، فعالیت‌های کودکان و دیگر لحظات روزمره نیز استفاده شود. حتی می‌توان ویدئوهای قدیمی را دوباره با انتخاب یک سوژه مشخص ویرایش کرد و نگاه متفاوتی به آن‌ها داشت.
برای مثال، کاربر می‌تواند گوشی را روی سه‌پایه قرار دهد و از تمرین ورزشی خود فیلم بگیرد. پس از پایان فیلم‌برداری، کافی است خودش را به‌عنوان سوژه انتخاب کند تا ویدئویی با تمرکز بر حرکات او ایجاد شود؛ بدون اینکه فرد دیگری لازم باشد پشت دوربین حضور داشته باشد.
این قابلیت فقط مختص به ویدئوهایی که با گوشی‌های Galaxy ضبط شده‌اند، نیست. کاربران می‌توانند از این قابلیت برای ویدئوهایی که با گوشی‌های دیگر ضبط کرده‌اند نیز استفاده کنند. برای استفاده از قابلیت My FanCam فقط کافی است ویدئو را به Galaxy منتقل کنند و تغییرات لازم را انجام دهند.
برای نتیجه بهتر چگونه فیلم بگیریم؟
تیم توسعه این فناوری برای استفاده بهتر کاربران از قابلیت‌‌های My FanCam چند توصیه دارد. هنگام فیلم‌برداری بهتر است از وضوح بالاتر استفاده کنید و کادر را کمی بازتر بگیرید تا فضای بیشتری اطراف سوژه وجود داشته باشد. این کار فضای بیشتری برای دنبال‌کردن سوژه در اختیار سیستم قرار می‌دهد.
هنگام انتخاب سوژه نیز بهتر است فریمی را انتخاب کنید که فرد موردنظر بیش از حد با افراد دیگر هم‌پوشانی نداشته باشد و صورت، نیم‌تنه یا تمام بدن او به‌وضوح دیده شود. چنین انتخابی به سیستم کمک می‌کند سوژه را بهتر شناسایی و دنبال کند.
My FanCam با ترکیب هوش مصنوعی و پردازش روی خود گوشی، انتخاب و دنبال‌کردن سوژه را به بخشی ساده از تجربه ویرایش ویدئو تبدیل می‌کند. قابلیتی که به کاربران اجازه می‌دهد حتی بعد از پایان فیلم‌برداری، تصمیم بگیرند کدام فرد در ویدئو بیشتر دیده شود.
