A/Bテストを超え、学習しながらウェブを最適化させる手法(Bandit Algorithms for Website Optimization)
http://blog.kzfmix.com/entry/1360101292
"Bandit Algorithms for Website Optimization"
http://www.amazon.co.jp/gp/product/1449341330?ie=UTF8&camp=1207&creative=8411&creativeASIN=1449341330&linkCode=shr&tag=kinnekosblog-22
サンプルコードはPythonだそう。