在这段视频https://youtu.be/8YEdHjGMeho中制作 cookie 时，我正在观看应用科学探索状态空间。他正在手动设置所有内容，看起来他正在搜索 10 维配方空间。
我在想很难给你尝到的每一个饼干一个一致的分数，但你可以很容易地对尝过的饼干进行排名。
有人如何在没有全局评分函数的框架中优化超参数。两点之间只有一个嘈杂的排名。我认为可以公平地假设选择是可传递的，并且在整个实验过程中您的品味不会发生太大变化。
看起来他的函数一次可以分批运行 20-30 个点，但每批都有相当高的延迟。
如果您对使用（而不是开发）感兴趣，您应该尝试一下我们的排名系统rankade。Rankade 是免费且易于使用的，它可以管理小到大的游戏组（由玩家或“cookie”组成，根据您的需要，或其他），它具有排名、统计数据等功能。它可能不会涵盖您的所有任务，但排名应该很有用cookie 从最好到最差，包括全球和部分排名。
Ghosts 的功能允许您创建一个没有任何帐户但您的帐户的组。Rankade 的算法可以在不同的范围内管理任何类型的匹配。由于派系结构，您可以记录输出以进行 1 对 1 比较，或 2+ 项目（甚至混合两种“匹配”），而Bradley-Terry模型或其他排名系统（如大多数已知的Elo或Glicko - 这是一个比较）不要。确实很难为您品尝的每个 cookie 给出一致的分数，但是在您的工作中，多重比较（例如，每个“匹配” 3-6 个 cookie）应该是合适且有用的。如果您有多个具有不同可靠性的测试仪，您可以使用权重功能来测量他们的'