Yandex Research выложил в опенсорс RuLeanALBERT — самую большую BERT-подобную модель на русском языке, которая поместится на ваш компьютер

Нейросеть обучали децентрализованно с помощью вычислительной платформе Яндекса. На бенчмарках по пониманию языка она показывает результаты, сравнимые с другими открытыми моделями и где-то даже близкие к state-of-the-art.

Модель хотя и имеет миллиарды параметров, но вполне способна уместиться на одну домашнюю GPU: вы можете использовать её открытый код в своих проектах для классификации предложений, представления текстов и других языковых задач, не требующих генерации.

Yandex Research — это исследовательская группа в Яндексе, которая занимается фундаментальными проблемами в важнейших областях computer science.

Подробности – в статье на Хабре

🛠 Generative Visual Prompt: Unifying Distributional Control of Pre-Trained Generative Models

⚙️ Github
🗒 Paper
🦾 Dataset

@ai_machinelearning_big_data

🛠 Omni-Dimensional Dynamic Convolution

A novel multi-dimensional attention mechanism with a parallel strategy to learn complementary attentions for convolutional kernels.

⚙️ Github
🗒 Paper
🦾 Dataset

@ai_machinelearning_big_data

👁 Real-time Online Video Detection with Temporal Smoothing Transformers

git clone --recursive git@github.com:zhaoyue-zephyrus/TeSTra.git

⚙️ Github
🗒 Paper
🦾 Dataset

@ai_machinelearning_big_data

🗒 Text2Light: Zero-Shot Text-Driven HDR Panorama Generation

Text2Light can generate HDR panoramas in 4K+ resolution using free-form texts solely.

conda env create -f environment.yml
conda activate text2light

⚙️ Github
💡 Project
💻 Model
🗒 Paper
🦾 Tutorial

@ai_machinelearning_big_data

🗣 Robust Speech Recognition via Large-Scale Weak Supervision

Whisper is a general-purpose speech recognition model by Open AI.

pip install git+https://github.com/openai/whisper.git

⚙️ Github
💡 Colab
💻 Model
🗒 Paper
🦾 Dataset
✴️ HABR

@ai_machinelearning_big_data

🔄 VToonify: Controllable High-Resolution Portrait Video Style Transfer


git clone https://github.com/williamyang1991/VToonify.git
cd VToonify

⚙️ Github
💡 Colab
💻 Project
🗒 Paper
🦾 Dataset
🎞 Video

@ai_machinelearning_big_data

🤗 SetFit - Efficient Few-shot Learning with Sentence Transformers

An efficient and prompt-free framework for few-shot fine-tuning of Sentence Transformers (ST).

python -m pip install setfit

⚙️ Github
🗒 Paper
📌 Blog
🦾 Model and Dataset

@ai_machinelearning_big_data

🔲 TensorStore

Novel open-source C++ / #Python library for storage/manipulation of high-dim data

⚙️ Github
🗒 Tutorial
📌 Google AI
🦾 Docs

@ai_machinelearning_big_data

📎 Dilated Neighborhood Attention Transformer

natural, flexible and efficient extension to NA that can capture more global context and expand receptive fields exponentially at no additional cost.

⚙️ Github
🗒 Model
📋 Paper
📌 Dataset

@ai_machinelearning_big_data

🎓 YATO: Yet Another deep learning based Text analysis Open toolkit

pip install ylab-yato

⚙️ Github
📋 Paper
📌 Dataset

@ai_machinelearning_big_data

📎 Diffusion Posterior Sampling for General Noisy Inverse Problems

git clone https://github.com/DPS2022/diffusion-posterior-sampling

cd diffusion-posterior-sampling

⚙️ Github
📋 Paper
📌 Dataset

@ai_machinelearning_big_data