#Optuna

olеg lаvrоvskyloleg@hachyderm.io
2025-05-31

#Optuna is an open source hyperparameter optimization framework to automate hyperparameter search
optuna.org/

2025-02-03

Using for hyperparameter optimization to boost model accuracy on the dataset. It’s all about finding the right parameters for better predictions!

2024-11-19

Neural training goes brrrr #Optuna

An optuna dashboard, showing neural training process
2024-11-19

When I started developing Hypnagonia 3 years ago, I didn't envision it would lead me to a path of training neural networks, and yet here we are...

#neuralnetworks #Optuna #AIHorde

The dashboard from optuna, showing a graph showing neural network training process
2024-04-29

Подбор гиперпараметров RAG-системы с помощью Optuna

Сказ о том, как с помощью Opuna’ы сделать вашу RAG-систему чуточку (а может и не чуточку) эффективнее :)

habr.com/ru/articles/811239/

#rag #llm #transformers #data_science #optuna #machinelearning #huggingface

2024-03-27

Это мы юзаем: библиотека Optuna в Python для оптимизации гиперпараметров

Привет, Хабр! Гиперпараметры — это параметры, которые не учатся в процессе обучения модели. Они задаются заранее. От выбора гиперпараметров напрямую зависит качество и эффективность модели, а их оптимизация может улучшить результаты предсказаний. Традиционный подход к оптимизации гиперпараметров включает в себя grid search и random search, иногда они могут быть неэффективными и времязатратными, особенно когда пространство гиперпараметров велико. Когда я впервые столкнулся с необходимостью настроить сотни параметров в своей нейросети, задача показалась мне Сизифовым трудом . Каждый параметр мог значительно изменить результат, и пространство поиска казалось бесконечным. И немного просидев на стековерфлой я нашел либу Optuna , которая позоволила оптимизировать этот процесс. Optuna решает проблему оптимизации гиперпараметров, предоставляя легковесный фреймворк для автоматизации поиска оптимальных гиперпараметров. Она использует алгоритмы, такие как TPE , CMA-ES , и даже поддерживает пользовательские алгоритмы. Optuna полностью написана на Python и имеет мало зависимостей. В этой статье рассмотрим её основной функционал.

habr.com/ru/companies/otus/art

#optuna #python #аналитика_данных

Client Info

Server: https://mastodon.social
Version: 2025.04
Repository: https://github.com/cyevgeniy/lmst