Об этом проекте

Ask-Anything — это open-source проект, посвящённый пониманию видео и диалогам, разработанный Шанхайской лабораторией искусственного интеллекта. Он предоставляет различные модели видеодиалогов, включая VideoChat, VideoChat2 и их варианты, с поддержкой интеграции с такими языковыми моделями, как ChatGPT, StableLM, MOSS и MiniGPT-4. Проект включает сквозной диалог, обработку длинных видео, понимание видео высокого разрешения и другие функции, а также выпустил бенчмарк MVBench и 2 миллиона инструкционных данных. Последняя версия VideoChat3 демонстрирует значительные улучшения в общем, длинном и потоковом понимании видео. Проект предлагает онлайн-демонстрации, пространства Hugging Face и подробную документацию, что делает его подходящим для исследователей и разработчиков.