|
| |
| |
tac
Сообщений: 2601 |
 |
|
На: Целеполагание в железе
Добавлено: 16 май 13 9:52
|
Итак, господа. Я так пока и не увидел НИ ОДНОЙ идеи на основании чего агент может сформулировать цель. Все вы зациклились на якобы необходимости для этого некого обучения. Что других вариантов нет?
У вас получается, что без обучения агент не в состоянии формулировать цели, что явно расходится с реальностью.
Дам еще подсказку тогда. Уверен, почти никто не прочитал формализацию описанную в вики. А там четко написано "цели возникают у субъекта под давлением потребностей, связанных с его жизнедеятельностью и взаимодействием со средой и объектом управления.". Первую часть опустим как не очень интересную, и тогда останется "цели возникают у субъекта при взаимодействием со средой и объектом управления". Как видим обучение тут совсем не причем.
Теперь вопрос в том, как возникают эти цели при взаимодействии со средой/объектом управления?
А чтобы мы снова не уплыли в философию рассуждая о сферических конях в вакууме, снова дам ссылку на описание моей игры https://github.com/tac14/CyberNet/wiki/Проект-игры-«Киберсеть»-(CyberNet) -> Читаем проект тут.
И зададим вопрос в рамках этой игры. Допустим Вы пишите бота для игры в эту игру. Перед вами стоит задача наполнить планировщик агента целями - как вы это сделаете и на основании чего?
|
|
|
|
| На: Целеполагание в железе
Добавлено: 16 май 13 10:10
|
| Теперь вопрос в том, как возникают эти цели при взаимодействии со средой/объектом управления? |
|
Обучение это ключевое слово в данном вопросе, если субъект может управлять объектами которые с момента появления субъекта ему не известны и количество которых зависит от количества памяти субъекта. Иначе - он сможет взаимодействовать только с одним или несколькими объектами, но субъекту на большее не хватит собственного ресурса такого как память которой нет если субъект не может быть обучен. Одна простейшая потребность может сделать субъект зависимым от объекта аки магнит от железяки, но он не сделает его разумным и способным заметить смену объекта тобищ железяки. Я ответил на твой вопрос?
|
|
|
tac
Сообщений: 2601 |
|
|
| На: Целеполагание в железе
Добавлено: 16 май 13 10:18
|
Автор: гость
Обучение это ключевое слово в данном вопросе, если субъект может управлять объектами которые с момента появления субъекта ему не известны и количество которых зависит от количества памяти субъекта. Иначе - он сможет взаимодействовать только с одним или несколькими объектами, но субъекту на большее не хватит собственного ресурса такого как память которой нет если субъект не может быть обучен.
Одна простейшая потребность может сделать субъект зависимым от объекта аки магнит от железяки, но он не сделает его разумным и способным заметить смену объекта тобищ железяки. Я ответил на твой вопрос? |
|
Ответил вряд ли. Но это уже по теме, что радует. Т.е. якобы обучение нужно, чтобы при наличии нескольких альтернатив удовлетворить потребность наилучшим образом? А без обучения никак?
|
|
|
|
| На: Целеполагание в железе
Добавлено: 16 май 13 10:19
|
| как вы это сделаете и на основании чего? |
|
Для начала я бы хотел наконецтаки заставить нейросеть что я пишу делать то что я хочу. А там дело за малым - информация одного типа, влияет на информацию другого типа, из этого складывается цель, а ветки дерева что на странце были нарисованы типо пилить, кушать, плавить на выходы нейросети и осталось бы смотреть что будет.
|
|
|
|
| На: Целеполагание в железе
Добавлено: 16 май 13 10:22
|
| Т.е. якобы обучение нужно, чтобы при наличии нескольких альтернатив удовлетворить потребность наилучшим образом? А без обучения никак? |
|
У тебя два варианта - либо все возможные события учесть и ответную реакцию на них заложить изначально, при этом тратя ресурс памяти даже на ненужное, либо дать возможность обучаться + потенциал для выбора правильного действия и не думать о том какие ситуации могут у субъекта возникнуть, он всегда со второго раза сможет получить больший профит от ситуации чем с первого.
|
|
|
tac
Сообщений: 2601 |
|
|
| На: Целеполагание в железе
Добавлено: 16 май 13 10:24
|
Автор: гость
а ветки дерева что на странце были нарисованы типо пилить, кушать, плавить на выходы нейросети и осталось бы смотреть что будет. |
|
Ну, а как Вы выберите среди этих вариантов (пилить, кушать, плавить)?
|
|
|
|
| На: Целеполагание в железе
Добавлено: 16 май 13 10:27
|
номера 1, 2, 3. Если на выходе нейросети наибольшая активность явно указывает на номер после нескольких циклов обучения, то значит именно эту кнопочку она хочет нажать прямо сейчас и именно в этот момент целю является действие соответствующее выходу с номером n. 
|
|
|
tac
Сообщений: 2601 |
|
|
| На: Целеполагание в железе
Добавлено: 16 май 13 10:31
|
Автор: гость
У тебя два варианта - либо все возможные события учесть и ответную реакцию на них заложить изначально, при этом тратя ресурс памяти даже на ненужное, либо дать возможность обучаться + потенциал для выбора правильного действия и не думать о том какие ситуации могут у субъекта возникнуть, он всегда со второго раза сможет получить больший профит от ситуации чем с первого. |
|
А вот тут мы подходим к очень важному моменту (по сути с того с чего началась тема приведшая к созданию этой - но там никто ничего не понял  ) Так вот. Давайте подсчитаем что же лучше ... Вы правильно пишите "со второго раза" ! А это ключевой момент. Т.е. в первом варианте мне нужно память/время ТОЛЬКО на один раз, а обучение станет давать хоть какой-то выйгрыш ТОЛЬКО со второго. Так что же выбрать? Это может показаться сильно технично (и якобы обучение более естественно) - но давайте продолжим когда вы это признаете.
|
|
|
tac
Сообщений: 2601 |
|
|
| На: Целеполагание в железе
Добавлено: 16 май 13 10:34
|
Автор: гость
номера 1, 2, 3. Если на выходе нейросети наибольшая активность явно указывает на номер после нескольких циклов обучения, то значит именно эту кнопочку она хочет нажать прямо сейчас и именно в этот момент целю является действие соответствующее выходу с номером n. |
|
Хорошо. Ну чтобы обучать именно вы сформулируете обучающую выборку. Т.е. до того как сеть начнет хоть что-то давать на выходе, вы должны будите набрать несколько примеров входов-выходов. Что вы возьмете за входы, а что за выходы (что будут означать цифры на входах/выходах)?
|
|
|
| |
|
| На: Целеполагание в железе
Добавлено: 16 май 13 11:20
|
| Ну чтобы обучать именно вы сформулируете обучающую выборку. Т.е. до того как сеть начнет хоть что-то давать на выходе, вы должны будите набрать несколько примеров входов-выходов. Что вы возьмете за входы, а что за выходы (что будут означать цифры на входах/выходах)? |
|
Необязательно, она может и сама прийти к такому выводу. То что ты предлагаеш можно назвать мгновенным обучением, как пример - животные что могут ходить будучи новорождёнными. Цифры и будут означать выполняемое действие. Цифра она как макрос над действием "кушать". Тоесть цифра и действие - синонимы.
|
|
|
tac
Сообщений: 2601 |
|
|
| На: Целеполагание в железе
Добавлено: 16 май 13 11:23
|
Автор: гость
За универсальность можно и заплатить. |
|
Какая ж это универсальность когда нужен полный перебор более чем один раз? Он же не распостраняет свои вывод на неизвестные ситуации.
|
|
|
tac
Сообщений: 2601 |
|
|
| На: Целеполагание в железе
Добавлено: 16 май 13 11:25
|
Автор: гость
Необязательно, она может и сама прийти к такому выводу. То что ты предлагаеш можно назвать мгновенным обучением, как пример - животные что могут ходить будучи новорождёнными.
Цифры и будут означать выполняемое действие. Цифра она как макрос над действием "кушать". Тоесть цифра и действие - синонимы. |
|
Это из области фантастики - она не придет к каким то выводам, кроме тех, которые были заложены обучением. А чтобы обучение было - нужны примеры для обучения. И что на входе?
|
|
|
|