- Компиляторы
-
Обучение
Изучить Python Запускаемые примеры, NumPy, pandas и другое Изучить ИИНейросети, ML и LLM с нуля Изучить C и C++ Указатели, память, STL и современный C++ Изучить C#Основы C#, ООП, LINQ, async и упражнения .NET Изучить MatplotlibЛинейные, столбчатые, точечные и круговые диаграммы с визуализацией Алгоритмы на Python Поиск, сортировка, рекурсия и визуализация O(n) Алгоритмы на C и C++ Сравнение реализаций на C и C++ Программирование для детей Учись программировать, играя!
- ЗадачиНовое
- УчителямНовое
- Обновления
- Угостить кофе
Многорукий бандит — это ряд игровых автоматов (рук) с неизвестными выплатами. Эпсилон-жадная стратегия балансирует исследование и использование: с вероятностью epsilon она дёргает случайную руку, иначе — руку с наибольшей оценённой ценностью.
Чтобы запуск можно было проверить, случайные числа передаются на вход. Начните с оценки Q = 0 и счётчика N = 0 для каждой руки. На каждом шаге t:
- Если
random_values[t]< epsilon, исследуйте: arm =random_arms[t]. Иначе используйте: arm = рука с наибольшим Q (при равенстве — наименьший индекс). - Получите reward =
rewards[t][arm]. - N[arm] ← N[arm] + 1 и Q[arm] ← Q[arm] + (reward - Q[arm]) / N[arm] — скользящее среднее.
Реализуйте epsilon_greedy(rewards, epsilon, random_values, random_arms).
Входные данные
rewards: По одной строке на шаг с наградой, которую каждая рука выплатила бы на этом шаге.
epsilon: Вероятность исследования.
random_values: По одному случайному числу в [0, 1) на шаг.
random_arms: Рука, которую нужно дёрнуть на каждом шаге при исследовании.
Выходные данные
Верните итоговые оценки Q, по одной на руку.
Ограничения
1 ≤ шаги ≤ 10 000, 1 ≤ руки ≤ 100
0 ≤ epsilon ≤ 1, -100 ≤ каждая награда ≤ 100
Примеры
Пример 1
Ввод:
rewards = [
[1.0, 3.0],
[1.0, 3.0],
[1.0, 3.0],
[1.0, 3.0]
]
epsilon = 0.1
random_values = [0.5, 0.05, 0.7, 0.9]
random_arms = [0, 1, 0, 0]
Ожидаемый вывод:
[1.0, 3.0]
Пояснение
Шаг 0 — использование; оба Q равны 0, поэтому дёргается рука 0 и Q = [1, 0]. Шаг 1 — исследование (0.05 < 0.1), пробуется рука 1: Q = [1, 3]. Шаги 2 и 3 используют лучшую руку 1. Результат: [1, 3].
Пример 2
Ввод:
rewards = [
[2.0, 5.0],
[4.0, 5.0],
[0.0, 5.0]
]
epsilon = 0.0
random_values = [0.5, 0.5, 0.5]
random_arms = [1, 1, 1]
Ожидаемый вывод:
[2.0, 0.0]
Пояснение
При epsilon = 0 агент никогда не исследует. Он всё время дёргает руку 0, среднее которой меняется 2 → 3 → 2, и так и не узнаёт, что рука 1 платит 5. Результат: [2, 0].
Ссылки
-
Пример 1 Не запущеноВвод:
rewards = [ [1.0, 3.0], [1.0, 3.0], [1.0, 3.0], [1.0, 3.0] ] epsilon = 0.1 random_values = [0.5, 0.05, 0.7, 0.9] random_arms = [0, 1, 0, 0]Ожидаемый вывод:[1.0, 3.0]Ваш вывод -
Пример 2 Не запущеноВвод:
rewards = [ [2.0, 5.0], [4.0, 5.0], [0.0, 5.0] ] epsilon = 0.0 random_values = [0.5, 0.5, 0.5] random_arms = [1, 1, 1]Ожидаемый вывод:[2.0, 0.0]Ваш вывод
При отправке также выполняются ещё 4 скрытых теста. Если код не пройдёт один из них, вы увидите этот тест. Решите задачу, чтобы увидеть все.
JavaScript онлайн: запуск кода JS и Node.js
Write, run, and debug JavaScript or Node.js online in a full-featured browser IDE. Work with multiple files and packages, save your workspace, and collaborate in real time.
🚀 339,661 всего выполнений (665 в этом месяце)
Практикуйте JavaScript на задачах
Решайте задачи прямо в редакторе: запускайте тесты, отправляйте решение и получайте AI-рецензию.
⚡ Об этом онлайн-исполнителе JavaScript (Node.js)
CodeUtility JavaScript Executor позволяет писать и запускать современный JavaScript прямо в браузере - мгновенно и без какой-либо установки. Он использует реальные окружения Node.js для безопасного выполнения кода в изолированном контейнере, поддерживаются версии 16, 18 и 20.
Этот инструмент идеально подходит для тестирования сниппетов Node.js, изучения синтаксиса ES6+ или освоения базовых концепций JavaScript, таких как циклы, функции, массивы, промисы и поведение async/await.
Вы также можете проверять алгоритмы, отлаживать небольшие скрипты или экспериментировать с логикой выполнения без установки Node локально. Подходит ученикам, backend‑разработчикам и всем, кому нужен быстрый способ запускать JavaScript‑код в браузере.
Больше, чем просто запуск кода
В одном редакторе есть всё для работы: несколько файлов, изолированный терминал, библиотеки для выбранной версии, сохранение проектов, общий доступ по ссылке и совместная работа в реальном времени.
Как пользоваться редактором
Выберите версию языка, откройте или создайте файл, напишите код и нажмите «Запустить». Результат появится в терминале. После входа в аккаунт можно хранить файлы в рабочем пространстве, устанавливать библиотеки и работать над кодом вместе с другими.
- Выберите версию и отредактируйте текущий файл или откройте другой файл рабочего пространства.
- Запустите код, при необходимости введите данные в терминале и просмотрите сохранённую историю запусков.
- Используйте библиотеки, инструменты рабочего пространства, общий доступ и чат, когда для задачи требуется несколько фрагментов кода.
💡 Базовое руководство по Node.js для начинающих
1. Объявление переменных и констант
Используйте let или const для переменных с блочной областью видимости. const применяется для констант.
let x = 10;
const PI = 3.14;
let name = "Alice";
let isActive = true;
2. Условия (if / switch)
Используйте if, else if, else или switch для управления потоком выполнения.
let x = 2;
if (x === 1) {
console.log("Один");
} else if (x === 2) {
console.log("Два");
} else {
console.log("Другое");
}
switch (x) {
case 1:
console.log("Один");
break;
case 2:
console.log("Два");
break;
default:
console.log("Другое");
}
3. Циклы
Используйте for, while и forEach для перебора данных.
for (let i = 0; i < 3; i++) {
console.log(i);
}
let n = 3;
while (n > 0) {
console.log(n);
n--;
}
4. Массивы
Используйте массивы для хранения упорядоченных списков значений. Обращайтесь к элементам по индексам.
let fruits = ["яблоко", "банан", "вишня"];
console.log(fruits[0]);
console.log(fruits.length);
5. Работа с массивами
Используйте методы push, pop, slice и reverse.
fruits.push("киви");
fruits.pop();
console.log(fruits.slice(0, 2));
console.log(fruits.reverse());
let squares = [1, 2, 3, 4, 5].map(x => x * x);
console.log(squares);
6. Ввод/вывод в консоли
Используйте console.log для вывода и модуль readline для ввода.
const readline = require('readline');
const rl = readline.createInterface({
input: process.stdin,
output: process.stdout
});
rl.question("Как тебя зовут? ", name => {
console.log(`Привет, ${name}`);
rl.close();
});
7. Функции
Функции можно объявлять или выражать. Стрелочные функции часто используются в современном JavaScript.
function greet(name) {
return `Привет, ${name}`;
}
const add = (a, b) => a + b;
console.log(greet("Alice"));
console.log(add(2, 3));
8. Объекты (Map)
Объекты хранят пары ключ‑значение. Они похожи на словари или отображения (maps).
let person = { name: "Bob", age: 25 };
console.log(person.name);
console.log(person["age"]);
// Коллекция Map из ES6
const map = new Map();
map.set("a", 1);
console.log(map.get("a"));
9. Обработка исключений
Используйте try, catch и finally для безопасной обработки ошибок.
try {
throw new Error("Что-то пошло не так");
} catch (e) {
console.log(e.message);
} finally {
console.log("Очистка при необходимости");
}
10. Работа с файлами
Используйте модуль fs Node.js для чтения и записи файлов.
const fs = require("fs");
fs.writeFileSync("test.txt", "Привет, файл");
const data = fs.readFileSync("test.txt", "utf8");
console.log(data);
11. Работа со строками
Используйте методы trim(), toUpperCase(), replace() и split().
let text = " Hello World ";
console.log(text.trim());
console.log(text.toUpperCase());
console.log(text.replace("Hello", "Hi"));
console.log(text.split(" "));
12. Классы и объекты
ES6+ поддерживает ООП через синтаксис class.
class Person {
constructor(name) {
this.name = name;
}
greet() {
return `Привет, я - ${this.name}`;
}
}
const p = new Person("Alice");
console.log(p.greet());
13. Ссылки
Объекты и массивы в JavaScript передаются по ссылке.
function update(arr) {
arr.push("changed");
}
let data = ["original"];
update(data);
console.log(data); // ["original", "changed"]