#bayesian #optimization #python #gaussianprocess
https://medium.com/@okanyenigun/step-by-step-guide-to-bayesian-optimization-a-python-based-approach-3558985c6818
https://medium.com/@okanyenigun/step-by-step-guide-to-bayesian-optimization-a-python-based-approach-3558985c6818
Medium
Step-by-Step Guide to Bayesian Optimization: A Python-based Approach
Building the Foundation: Implementing Bayesian Optimization in Python
#hpt #hpo #bayesian #gaussianprocess
Раскрыты недостатки GP:
1) чувствительность к масштабу параметров
2) чувствительность к выбранному ядру (по сути, приор определяет догадки о виде истинной black box функции)
3) плохая работа с категориальными параметрами (Hamming kernel?)
Когда докладчика спросили про параллелизацию, мне кажется, он лопухнулся, сказав, что тут у случайного поиска преимущество, ведь его можно выполнять параллельно, а gp - нет. Ну сам же показывал графики Expected Improvement, кто запрещает брать из них вместо единичного argmax батч argsorted()[:batch_size]?
https://www.youtube.com/watch?v=jtRPxRnOXnk
Раскрыты недостатки GP:
1) чувствительность к масштабу параметров
2) чувствительность к выбранному ядру (по сути, приор определяет догадки о виде истинной black box функции)
3) плохая работа с категориальными параметрами (Hamming kernel?)
Когда докладчика спросили про параллелизацию, мне кажется, он лопухнулся, сказав, что тут у случайного поиска преимущество, ведь его можно выполнять параллельно, а gp - нет. Ну сам же показывал графики Expected Improvement, кто запрещает брать из них вместо единичного argmax батч argsorted()[:batch_size]?
https://www.youtube.com/watch?v=jtRPxRnOXnk
YouTube
Thomas Huijskens - Bayesian optimisation with scikit-learn
Filmed at PyData London 2017
Description
Join Full Fact, the UK's independent factchecking charity, to discuss how they plan to make factchecking dramatically more effective with technology that exists now.
Abstract
Factchecking is just one solution to…
Description
Join Full Fact, the UK's independent factchecking charity, to discuss how they plan to make factchecking dramatically more effective with technology that exists now.
Abstract
Factchecking is just one solution to…
🤔1
#abtesting #bayesian
"Good decisions for business are more important than being on the safe side."
https://youtu.be/8huhVCMmS_c?si=ypw66iyvoBL3Jidr
"Good decisions for business are more important than being on the safe side."
https://youtu.be/8huhVCMmS_c?si=ypw66iyvoBL3Jidr
YouTube
Ruben Mak | Successfully applying Bayesian statistics to A/B testing in your business
PyData Amsterdam 2017
A lot of theory is available on how the statistics of A/B testing could be improved using Bayesian statistics. In this talk I will discuss several theoretical problems and I will share my experiences on whether they actually impact…
A lot of theory is available on how the statistics of A/B testing could be improved using Bayesian statistics. In this talk I will discuss several theoretical problems and I will share my experiences on whether they actually impact…