GotAI.NET

Форум: Проблемы искусственного интеллекта

 

Регистрация | Вход

 Все темы | Новая тема Стр.29 (41)<< < Пред. | След. > >>   Поиск:  
 Автор Тема: На: Об одном подходе к решению задачи создания СИИ
Траян
Сообщений: 326
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 17 май 17 15:22
Изменено: 17 май 17 15:24
Цитата:
Автор: r
Арифметика (как основной и единственный инструмент (в вашем случае)) не применима во многошаговом прогнозировании.


Почему? Гёдель не велит?

[Ответ][Цитата]
Victor G. Tsaregorodtsev
Сообщений: 2878
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 17 май 17 15:52
Цитата:
Автор: Траян
Здесь речь идет о том, не нужно пытаться решить проблему многошагового прогнозирования(планирования) стараясь найти некий универсальный метода сравнения любых двух стратегий S1 и S2 между собой.

По всей видимости, в такой постановке эта задача неразрешима в принципе. Так как для ее решения в предельно общем случае необходимо уметь находить отдельно суммы R1 и R2 матожиданий подкреплений на бесконечном горизонте (при сколь-нибудь сложных стратегиях объем вычислений становится неподъемным, там рост по экспоненте).

А зачем на подкрепления глядеть, если можно глядеть на мощности/размерности пространств решений?

Как нас учит одна из классиков от фантастики, "Основой стратегии ... является не выбор какого-то одного пути к победе, а создание таких условий, чтобы все пути вели к ней. В идеале. Вашу смерть я использую одним способом, успех - другим."
[Ответ][Цитата]
гость
188.170.83.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 18 май 17 2:45
Т.> в СИИ

дык если про сии, то и модель d(R1,R2)-расчета может казаться не очень адекватной.. эвристический интеллект на стадии 'предварительного решения вопроса' (ваша идея вложенных пространств развертывающегося решения вовсе не требует обоснования через [w,d,c]) ориентируется вначале на некие глобальные характеристики обобщенных вариантов альтернатив действия (напр. по показателям времени, степени знакомства, возможным рискам (не сливая выигрыши и потери в единую сумму), степени неопределенности, общей сложности).
как бы эвристический интеллект придет к определенному решению без того, чтобы ультрарационализировать через W(S1)*d(S1,S2)..

кстати, в еи встроены 'иррациональности' вроде склонности выбрать более желанное (ваша 'забота о будущем', образ желанного как бы приближен (не дисконтирован)), а не 'объективно ценное', наверное не просто так - это некий адаптивный субоптимум на почве того, что 'объективные полезности-вознаграждаемости' определить однозначно трудно.
[Ответ][Цитата]
kondrat
Сообщений: 2438
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 18 май 17 15:18
Цитата:
Автор: Victor G. Tsaregorodtsev


А зачем на подкрепления глядеть, если можно глядеть на мощности/размерности пространств решений?

Как нас учит одна из классиков от фантастики, "Основой стратегии ... является не выбор какого-то одного пути к победе, а создание таких условий, чтобы все пути вели к ней. В идеале. Вашу смерть я использую одним способом, успех - другим."

Это сработает, если Вы - Бог.
[Ответ][Цитата]
Траян
Сообщений: 326
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 0:56
Изменено: 19 май 17 1:00
Еще раз зафиксирую для себя текущее видение следующего этапа развития СПИ.
(не хочется терять столь трудно и редко добываемое состояние ясности).

Итак: Предполагается, что все новые стратегии (модели мира, личности) создаются всего лишь изменением, модификацией, усовершенствованием уже имеющейся стратегии (модели мира, личности).

Каждое такое изменение сводится либо к замене каких-то отдельных частей, либо к добавлению новых.

Ясно, что если исходная стратегия очень проста, то ее изменение может выглядеть как замена всей этой стратегии на новую. Но это не так - новые стратегии не могут создаваться с нуля, на пустом месте.

Формально процесс модернизации стратегий можно представить следующим образом:
пусть k1,k2,... kn - отдельные компоненты стратегии P.
продукционные правила позволяющие изменять P могут выглядеть следующим образом:
если А>B, то существует k(n+1);
если a=b, то k2=kx и т.д.

Конечно же, при реализации такого подхода в агента придется вкладывать предустановленную онтологию (кучу априорных знаний), т.е. сделать то, чего я все время пытался избежать. Но судя по всему, без предустановленной онтологии (в виде декларативных либо процедуральных знаний) нельзя обойтись в принципе.

Утешением может послужить то обстоятельство, что при таком подходе (изменения имеющегося) объем вкладываемой онтологии будет на порядки меньше того, который пришлось бы вкладывать в агента способного строить стратегии "с нуля".

И самое главное - при этом удастся обойтись без разбора разного рода "вечных", "проклятых" философских вопросов.
[Ответ][Цитата]
Траян
Сообщений: 326
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 0:59
Цитата:
Автор: Victor G. Tsaregorodtsev
А зачем на подкрепления глядеть, если можно глядеть на мощности/размерности пространств решений?


Одно дополняет другое, имхо.
[Ответ][Цитата]
Траян
Сообщений: 326
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 1:21
Цитата:
Автор: гость
... это некий адаптивный субоптимум на почве того, что 'объективные полезности-вознаграждаемости' определить однозначно трудно.


Если рассматривать ЕИ как сочетание сознания и подсознания, то ЕИ находит суммы будущих вознаграждений (с той или иной степенью приближения) всегда, причем, сравнительно легко и быстро.

Это видно хотя бы из того, что ЕИ =(сознание+подсознание) никогда, ни в каких ситуациях - сколь неожиданными, экзотичными и даже шокирующими бы не были - ЕИ не "зависает" не уходит в "аварийный останов" и прочее.

Может притормозить одна из составляющих (сознание), перераспределиться управление в пользу подсознания - но в целом аппарат мышления не выключится, не остановит свою работу - нацеленную на максимизацию суммы подкреплений.

В любой ситуации будет выполняться процедура выбора действия (бездействие - тоже действие), а это значит, что в любой ситуации происходит вычисление суммы.

Причина того, почему Еи оказывается способным всегда определять 'объективные полезности-вознаграждаемости' кроется в особенностях организации процессов получения подкреплений/первичных эмоций.
[Ответ][Цитата]
rrr3
Сообщений: 8911
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 1:24
Цитата:
Автор: Траян
(не хочется терять столь трудно и редко добываемое состояние ясности).

Так далеко не уехать от начальной точки... следует перманентно "терять" и перманентно "добывать" "состояние ясности"..., но новые, более ясные "состояния ясности"...
[Ответ][Цитата]
Траян
Сообщений: 326
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 1:36
Цитата:
Автор: rrr3
Так далеко не уехать от начальной точки... следует перманентно "терять" и перманентно "добывать" "состояние ясности"..., но новые, более ясные "состояния ясности"...


Полностью согласен.
[Ответ][Цитата]
NO.
Сообщений: 8511
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 3:17
Цитата:
Автор: Траян
В любой ситуации будет выполняться процедура выбора действия (бездействие - тоже действие), а это значит, что в любой ситуации происходит вычисление суммы.

Почему суммы-то? Думать обычно приходится о каких-то системах, а там как раз везде умножение, нужно соединять в целое не суммируемые вещи. Суммированием обычно занимается просто цикл, там ничего умного не нужно.
[Ответ][Цитата]
гость
188.170.81.*
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 3:35
конечно в базисе 'интеллекта' не сумматоры, а аплификаторы, композиции.. не даром же ранее говорилось про неаддитивные меры.. операционность не сразу регуляризируется в алгебраичность (пусть и не вполне дефадзифицированную).. не сразу нелинейность приводит к квазилинейным суперпозициям..
[Ответ][Цитата]
Траян
Сообщений: 326
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 19 май 17 4:42
Изменено: 19 май 17 4:47
Цитата:
Автор: NO.
Суммированием обычно занимается просто цикл, там ничего умного не нужно.


Бинго!
Очень хорошее и правильное замечание. Попадание в яблочко.

Но Вы забегаете вперед.

Обсуждением роли циклов в общем рабочем процессе ЕИ, их месте, функциях, значении и пр. (а они там встречаются буквально на каждом углу), я предполагал заняться несколько позже.
[Ответ][Цитата]
Траян
Сообщений: 326
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 20 май 17 5:34
Цитата:
Автор: 44
Это верно.


Уважаемый форумчанин с никнеймом "44"!

Я же просил Вас не размещать свои посты на этой ветке - они здесь совсем не к месту.

На первый раз я их скопирую и перенесу в "Флудилку". В дальнейшем они будут попросту стираться.
[Ответ][Цитата]
Траян
Сообщений: 326
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 22 май 17 8:12
Изменено: 22 май 17 8:17
Попробую подытожить, обобщить и систематизировать свои посты за март-апрель-май. Интересно посмотреть как пробивала путь - слепо шарахаясь из стороны в сторону - та мысль об механизме самосознания, к которой я сейчас пришел

В конце марта (22-25 числа) в качестве одного из ориентиров в дальнейшей работе над СПИ я рассматривал придание ему способности к содержательному общению.

Для ускорения раскрытия этой способности предлагалось наделить агента априорными субъектно-ориентированными знаниями.

Эти знания предполагалось разместить в механизм прогнозирования:
"25 марта : Даже на такой, чисто технический вопрос - а куда, собственно говоря, в какое место общей процедуры построения моделей должны быть воткнуты эти априорные бустерные знания, ответить совсем непросто.

7 апреля : Судя по всему, эти знания должны быть встроены, имплементированы в механизм прогнозирования.Конечно же, этот механизм не будет работать тупо на построении дерева вариантов.
В основе работы этого механизма должны лежать совсем другие процедуры, а именно, манипуляции с тем, что можно назвать "историями" или "сюжетами".
Характерной особенностью историй, позволяющей подступиться к задаче их формализации и имплементации, является то, что всякая история имеет начало и конец (даже те из них, которые громогласно объявляются якобы бесконечными). ".

9 апреля:
Похоже я поторопился. Дерево вариантов , конечно же, будет. Иначе никак не получить полноты и универсальности.
Другое дело, что благодаря применению вероятностей мы можем сходу обрезать малоперспективные ветви.Кровь, пот и слезы пролитые при создании БМП начинают себя оправдывать.
Понятно теперь, что высокоуровневые субъектно-ориентированные знания зашиваются в знания прогностические (имеющие высокие, близкие к 1 вероятности).

17апреля: "Причина того, почему я решил начинать с предельного упрощения объясняется двумя простыми обстоятельствами:
Во-первых, даже такую, предельно простую модель реализовать в виде реально существующей и работающей конструкции очень, очень, ОЧЕНЬ трудно.
Практически, сложность этой задачи близка к тому пределу, при достижении которого для меня эта задача стала бы вообще непосильной."

28 апреля появилось утверждение о том, что при решении вопроса об имплементации субъектно-ориентированных знаний следует сосредоточиться не на прогностическом процессе как таковом, а на иерархии управленческих процессов:

28 апреля:То, что без прогнозирования высокоуровневые субъектно-ориентированные знания бесполезны - это верно. (Именно в прогнозировании/планировании раскрывается их суть и содержание.)

Но проявляться они должны не на этапе многошагового прогнозирования (с использованием сложных и изощренных моделей) - тут я здорово ошибался. А на более низком уровне, в процессе выбора действий (которые ведь могут выбираться не только как одиночная ответная реакция на текущее состояние внешней среды, но и для
исполнения - либо непрерывно осуществляемого контроля исполнения - ранее выбранного плана, некой линии поведения).

Именно на этом уровне агент может уже задаваться вопросами вида:
"Кто я такой?" "Что я делаю?" "Зачем я это делаю?"

Похоже, для того, чтобы у искусственных агентов (живых существ) могли наблюдаться самые первые проблески самосознания (рефлексии) необходимо чтобы они обладали способностью хотя бы к двухшаговому прогнозированию/планированию.

7 мая:
Поэтому в следующем поколении программы СПИ главным новшеством будет реализация именно способности к простейшему многошаговому (т.е. двухшаговому) прогнозированию.

Сама эта способность будет осуществляться не путем построения разветвленных деревьев действие-ситуация(состояние среды), ибо в этом случае неизбежен комбинаторный взрыв. А так, как это делается в RL, где тому или иному состоянию среды приписывается значение величины ценности.

Величину ценности можно рассматривать как аналог первичной эмоции, генерируемой по результату выполнения некой когнитивной операции (выработки стратегии/выбора действия). Чем более удачную стратегию удается выработать ("придумать") агенту, тем большее подкрепление он получает. Таким образом, при двухшаговом прогнозировании учитываются два источника первичных эмоций - одни из них получаются по старой схеме, в результате непосредственной оценки внешней среды, а другая - по результатам выполнения внутренней когнитивной операции.


16 мая:
Но вот с идеей о том, что справиться с комбинаторным взрывом при построении похоже, придется распрощаться.сейчас решение проблемы с многошаговым прогнозированием видится совсем другим.

обойтись без функции ценности и квази-эмоций удастся если оценивать создаваемые стратегии не по абсолютной шкале (а на бесконечно кол-ве шагов это жуткий гемор, тут хлопот не оберешься), а относительно - просто сравнивая разные стратегии попарно между собой.

При таком подходе удастся обеспечить постепенное развитие/совершенствование всей системы, но производиться это развитие будет не так, как виделось ранее: "обойтись без прогностических деревьев удастся с помощью некоего аналога эмоций"

Путь развития агента - это путь постепенного построения, выращивания им своей личности.

Минусы при таком подходе, такие же как и при всяком градиентном спуске.
В нашем случае это может привести к тому, что созданная в итоге личность может быть далека от идеала, от наиболее оптимального варианта, кроме того, уже выращенную личность агент не сможет радикально переделывать впоследствии.
[Ответ][Цитата]
ignat99
Сообщений: 4212
На: Об одном подходе к решению задачи создания СИИ
Добавлено: 22 май 17 8:28
Изменено: 23 май 17 5:36
.
[Ответ][Цитата]
 Стр.29 (41)1  ...  25  26  27  28  [29]  30  31  32  33  ...  41<< < Пред. | След. > >>