- Компиляторы
-
Обучение
Изучить Python Запускаемые примеры, NumPy, pandas и другое Изучить ИИНейросети, ML и LLM с нуля Изучить C и C++ Указатели, память, STL и современный C++ Изучить C#Основы C#, ООП, LINQ, async и упражнения .NET Изучить MatplotlibЛинейные, столбчатые, точечные и круговые диаграммы с визуализацией Алгоритмы на Python Поиск, сортировка, рекурсия и визуализация O(n) Алгоритмы на C и C++ Сравнение реализаций на C и C++ Программирование для детей Учись программировать, играя!
- ЗадачиНовое
- УчителямНовое
- Обновления
- Угостить кофе
Итерация по ценностям решает марковский процесс принятия решений: она находит V(s) — наибольшую суммарную дисконтированную награду, которую можно получить, начиная из состояния s.
Здесь переходы детерминированы. В состоянии s действие a даёт награду rewards[s][a] и ведёт в состояние next_states[s][a], где -1 означает конец эпизода. Начните с V(s) = 0 для каждого состояния и повторите iterations раз, вычисляя каждое новое значение по предыдущему проходу:
V_new(s) = максимум по a от ( rewards[s][a] + gamma × V(next_states[s][a]) )
где слагаемое gamma × V равно 0, если следующее состояние равно -1.
Реализуйте value_iteration(next_states, rewards, gamma, iterations).
Входные данные
next_states: Для каждого состояния — следующее состояние каждого из его действий (-1 завершает эпизод). У состояний может быть разное число действий.
rewards: Награда за каждое действие, той же формы, что и next_states.
gamma: Коэффициент дисконтирования.
iterations: Число проходов.
Выходные данные
Верните V после последнего прохода, по одному значению на состояние.
Ограничения
1 ≤ состояния ≤ 200, 1 ≤ действия на состояние ≤ 10, 0 ≤ iterations ≤ 1 000
-100 ≤ каждая награда ≤ 100, 0 ≤ gamma ≤ 1
Примеры
Пример 1
Ввод:
next_states = [
[0, 1],
[0, 2],
[-1]
]
rewards = [
[0.0, 0.0],
[0.0, 0.0],
[10.0]
]
gamma = 0.9
iterations = 3
Ожидаемый вывод:
[8.1, 9.0, 10.0]
Пояснение
Проход 1: награду может получить только состояние 2, V = [0, 0, 10]. Проход 2: состояние 1 идёт вправо к нему, 0.9 × 10 = 9, V = [0, 9, 10]. Проход 3: состояние 0 получает 0.9 × 9 = 8.1. Результат: [8.1, 9, 10].
Пример 2
Ввод:
next_states = [
[1, 0],
[0, 1]
]
rewards = [
[1.0, 2.0],
[3.0, 0.0]
]
gamma = 0.0
iterations = 5
Ожидаемый вывод:
[2.0, 3.0]
Пояснение
При gamma = 0 будущее не учитывается, поэтому ценность каждого состояния — просто его лучшая немедленная награда: [2, 3].
Ссылки
-
Пример 1 Не запущеноВвод:
next_states = [ [0, 1], [0, 2], [-1] ] rewards = [ [0.0, 0.0], [0.0, 0.0], [10.0] ] gamma = 0.9 iterations = 3Ожидаемый вывод:[8.1, 9.0, 10.0]Ваш вывод -
Пример 2 Не запущеноВвод:
next_states = [ [1, 0], [0, 1] ] rewards = [ [1.0, 2.0], [3.0, 0.0] ] gamma = 0.0 iterations = 5Ожидаемый вывод:[2.0, 3.0]Ваш вывод
При отправке также выполняются ещё 4 скрытых теста. Если код не пройдёт один из них, вы увидите этот тест. Решите задачу, чтобы увидеть все.
JavaScript онлайн: запуск кода JS и Node.js
Write, run, and debug JavaScript or Node.js online in a full-featured browser IDE. Work with multiple files and packages, save your workspace, and collaborate in real time.
🚀 339,661 всего выполнений (665 в этом месяце)
Практикуйте JavaScript на задачах
Решайте задачи прямо в редакторе: запускайте тесты, отправляйте решение и получайте AI-рецензию.
⚡ Об этом онлайн-исполнителе JavaScript (Node.js)
CodeUtility JavaScript Executor позволяет писать и запускать современный JavaScript прямо в браузере - мгновенно и без какой-либо установки. Он использует реальные окружения Node.js для безопасного выполнения кода в изолированном контейнере, поддерживаются версии 16, 18 и 20.
Этот инструмент идеально подходит для тестирования сниппетов Node.js, изучения синтаксиса ES6+ или освоения базовых концепций JavaScript, таких как циклы, функции, массивы, промисы и поведение async/await.
Вы также можете проверять алгоритмы, отлаживать небольшие скрипты или экспериментировать с логикой выполнения без установки Node локально. Подходит ученикам, backend‑разработчикам и всем, кому нужен быстрый способ запускать JavaScript‑код в браузере.
Больше, чем просто запуск кода
В одном редакторе есть всё для работы: несколько файлов, изолированный терминал, библиотеки для выбранной версии, сохранение проектов, общий доступ по ссылке и совместная работа в реальном времени.
Как пользоваться редактором
Выберите версию языка, откройте или создайте файл, напишите код и нажмите «Запустить». Результат появится в терминале. После входа в аккаунт можно хранить файлы в рабочем пространстве, устанавливать библиотеки и работать над кодом вместе с другими.
- Выберите версию и отредактируйте текущий файл или откройте другой файл рабочего пространства.
- Запустите код, при необходимости введите данные в терминале и просмотрите сохранённую историю запусков.
- Используйте библиотеки, инструменты рабочего пространства, общий доступ и чат, когда для задачи требуется несколько фрагментов кода.
💡 Базовое руководство по Node.js для начинающих
1. Объявление переменных и констант
Используйте let или const для переменных с блочной областью видимости. const применяется для констант.
let x = 10;
const PI = 3.14;
let name = "Alice";
let isActive = true;
2. Условия (if / switch)
Используйте if, else if, else или switch для управления потоком выполнения.
let x = 2;
if (x === 1) {
console.log("Один");
} else if (x === 2) {
console.log("Два");
} else {
console.log("Другое");
}
switch (x) {
case 1:
console.log("Один");
break;
case 2:
console.log("Два");
break;
default:
console.log("Другое");
}
3. Циклы
Используйте for, while и forEach для перебора данных.
for (let i = 0; i < 3; i++) {
console.log(i);
}
let n = 3;
while (n > 0) {
console.log(n);
n--;
}
4. Массивы
Используйте массивы для хранения упорядоченных списков значений. Обращайтесь к элементам по индексам.
let fruits = ["яблоко", "банан", "вишня"];
console.log(fruits[0]);
console.log(fruits.length);
5. Работа с массивами
Используйте методы push, pop, slice и reverse.
fruits.push("киви");
fruits.pop();
console.log(fruits.slice(0, 2));
console.log(fruits.reverse());
let squares = [1, 2, 3, 4, 5].map(x => x * x);
console.log(squares);
6. Ввод/вывод в консоли
Используйте console.log для вывода и модуль readline для ввода.
const readline = require('readline');
const rl = readline.createInterface({
input: process.stdin,
output: process.stdout
});
rl.question("Как тебя зовут? ", name => {
console.log(`Привет, ${name}`);
rl.close();
});
7. Функции
Функции можно объявлять или выражать. Стрелочные функции часто используются в современном JavaScript.
function greet(name) {
return `Привет, ${name}`;
}
const add = (a, b) => a + b;
console.log(greet("Alice"));
console.log(add(2, 3));
8. Объекты (Map)
Объекты хранят пары ключ‑значение. Они похожи на словари или отображения (maps).
let person = { name: "Bob", age: 25 };
console.log(person.name);
console.log(person["age"]);
// Коллекция Map из ES6
const map = new Map();
map.set("a", 1);
console.log(map.get("a"));
9. Обработка исключений
Используйте try, catch и finally для безопасной обработки ошибок.
try {
throw new Error("Что-то пошло не так");
} catch (e) {
console.log(e.message);
} finally {
console.log("Очистка при необходимости");
}
10. Работа с файлами
Используйте модуль fs Node.js для чтения и записи файлов.
const fs = require("fs");
fs.writeFileSync("test.txt", "Привет, файл");
const data = fs.readFileSync("test.txt", "utf8");
console.log(data);
11. Работа со строками
Используйте методы trim(), toUpperCase(), replace() и split().
let text = " Hello World ";
console.log(text.trim());
console.log(text.toUpperCase());
console.log(text.replace("Hello", "Hi"));
console.log(text.split(" "));
12. Классы и объекты
ES6+ поддерживает ООП через синтаксис class.
class Person {
constructor(name) {
this.name = name;
}
greet() {
return `Привет, я - ${this.name}`;
}
}
const p = new Person("Alice");
console.log(p.greet());
13. Ссылки
Объекты и массивы в JavaScript передаются по ссылке.
function update(arr) {
arr.push("changed");
}
let data = ["original"];
update(data);
console.log(data); // ["original", "changed"]