dialogue-policy

import%20marimo%0A%0A__generated_with%20%3D%20%220.25.1%22%0Aapp%20%3D%20marimo.App(width%3D%22medium%22)%0A%0A%0A%40app.cell%0Adef%20_()%3A%0A%20%20%20%20import%20math%0A%20%20%20%20import%20marimo%20as%20mo%0A%0A%20%20%20%20return%20math%2C%20mo%0A%0A%0A%40app.cell%0Adef%20_(mo)%3A%0A%20%20%20%20task_focus%20%3D%20mo.ui.slider(0%2C%201%2C%20step%3D0.05%2C%20value%3D0.5%2C%20label%3D%22Task%20focus%22%2C%20show_value%3DTrue)%0A%20%20%20%20temperature%20%3D%20mo.ui.slider(0.05%2C%201%2C%20step%3D0.05%2C%20value%3D0.25%2C%20label%3D%22Temperature%22%2C%20show_value%3DTrue)%0A%20%20%20%20mo.vstack(%5Btask_focus%2C%20temperature%5D)%0A%20%20%20%20return%20task_focus%2C%20temperature%0A%0A%0A%40app.cell%0Adef%20_(math%2C%20task_focus%2C%20temperature)%3A%0A%20%20%20%20acts%20%3D%20%5B%0A%20%20%20%20%20%20%20%20(%22Ask%20a%20question%22%2C%200.65%2C%200.65)%2C%0A%20%20%20%20%20%20%20%20(%22Reflect%22%2C%200.35%2C%200.95)%2C%0A%20%20%20%20%20%20%20%20(%22Offer%20advice%22%2C%200.95%2C%200.15)%2C%0A%20%20%20%20%5D%0A%20%20%20%20scores%20%3D%20%5Btask_focus.value%20*%20task%20%2B%20(1%20-%20task_focus.value)%20*%20social%20for%20_%2C%20task%2C%20social%20in%20acts%5D%0A%20%20%20%20_weights%20%3D%20%5Bmath.exp((score%20-%20max(scores))%20%2F%20temperature.value)%20for%20score%20in%20scores%5D%0A%20%20%20%20probabilities%20%3D%20%5Bweight%20%2F%20sum(_weights)%20for%20weight%20in%20_weights%5D%0A%20%20%20%20return%20acts%2C%20probabilities%2C%20scores%0A%0A%0A%40app.cell%0Adef%20_(acts%2C%20math%2C%20mo%2C%20probabilities%2C%20scores)%3A%0A%20%20%20%20_rows%20%3D%20%22%5Cn%22.join(%0A%20%20%20%20%20%20%20%20f%22%7C%20%7Bname%7D%20%7C%20%7Btask%3A.2f%7D%20%7C%20%7Bsocial%3A.2f%7D%20%7C%20%7Bscore%3A.2f%7D%20%7C%20%7Bprobability%3A.1%25%7D%20%7C%22%0A%20%20%20%20%20%20%20%20for%20(name%2C%20task%2C%20social)%2C%20score%2C%20probability%20in%20zip(acts%2C%20scores%2C%20probabilities)%0A%20%20%20%20)%0A%20%20%20%20_best%20%3D%20acts%5Bmax(range(len(acts))%2C%20key%3Dlambda%20i%3A%20probabilities%5Bi%5D)%5D%5B0%5D%0A%20%20%20%20_entropy%20%3D%20-sum(p%20*%20math.log2(p)%20for%20p%20in%20probabilities)%0A%20%20%20%20mo.md(%0A%20%20%20%20%20%20%20%20%22%7C%20Dialogue%20act%20%7C%20Task%20score%20%7C%20Social%20score%20%7C%20Combined%20score%20%7C%20Probability%20%7C%5Cn%22%0A%20%20%20%20%20%20%20%20%22%7C%20%3A---%20%7C%20---%3A%20%7C%20---%3A%20%7C%20---%3A%20%7C%20---%3A%20%7C%5Cn%22%20%2B%20_rows%0A%20%20%20%20%20%20%20%20%2B%20f%22%5Cn%5Cn**Most%20likely%20act%3A**%20%7B_best%7D%20%20%5Cn**Policy%20entropy%3A**%20%7B_entropy%3A.2f%7D%20bits%22%0A%20%20%20%20)%0A%20%20%20%20return%0A%0A%0Aif%20__name__%20%3D%3D%20%22__main__%22%3A%0A%20%20%20%20app.run()%0A