Rationality: From AI to Zombies / Рациональность: от ИИ до Зомби: Zombie Responses
| Английский оригинал | Перевод на русский | |
|---|---|---|
Сожалеем, но текст оригинала доступен только зарегистрированным пользователям. |
Сегодня я утомлён, потому что вчера до трёх утра писал эссе о зомби из более чем 6000 слов, поэтому сегодня лишь отвечу Ричарду, а торчащие концы подберу завтра. sepremento 24.01.20 в 07:44 Я сегодня не в форме, потому что вчера до трёх утра писал эссе о зомби почти на шесть тысяч слов, поэтому сегодня лишь отвечу Ричарду и заполню вновь замеченный пробел. niya3 14.08.20 в 20:06 |
+5 |
|
(А) Ричард Чаппелл пишет: sepremento 24.01.20 в 07:44 |
||
|
Замечание по терминологии (во избежание ненужного замешательства): то, что вы называете "осознаваемым", другие назовут всего лишь "по-видимому осознаваемым" sepremento 24.01.20 в 07:46 Замечание по терминологии (во избежание ненужного замешательства): то, что вы называете "мыслимым", другие назовут всего лишь "по-видимому мыслимым" niya3 15.08.20 в 19:47 |
+4 | |
|
Разница между "я пока не вижу противоречий" и "это логически возможно" настолько велика (это NP-полная задача даже в некоторых кажущихся простыми случаях), что полезно иметь два разных термина. Поскольку спор о зомби разросся до размеров, где эту огромную разницу можно случайно замести под ковер незначительных терминологических отличий, я считаю, что будет правильно говорить "осознаваемо" вместо "логически возможно", а может быть, сделать ещё более видимое различие. Я не могу выбирать профессиональную терминологию, которая уже устоялась, но в нашем случае, могу всерьёз отказаться от её использования. sepremento 24.01.20 в 07:56 Разница между "я пока не вижу противоречий" и "это логически возможно" настолько велика (это NP-полная задача даже в некоторых кажущихся простыми случаях), что полезно иметь для этого два разных термина. Поскольку спор о зомби разросся настолько, что эта огромная разница может быть погребена под грудой мелких терминологических отличий, я считаю, что будет правильно говорить "мыслимо" вместо "логически возможно", или даже сделать ещё более заметное различие. Я не могу подобрать серьёзный термин, который уже устоялся, а в данном случае, предпочёл бы вообще не использовать таковой. niya3 15.08.20 в 19:54 |
||
|
Возможно, я буду говорить "по-видимому осознаваемо" в отношении того рода информации, что получают сторонники зомби, воображая Миры Зомби, а "логически возможно" в отношении того рода информации, что получается после представления завершенной модели или логического доказательства. Обратите внимание на разницу между информацией, которую вы можете получить, закрыв глаза и вообразив зомби, и информацией, что необходима вам для построения аргумента к тезису эпифеноменализма. sepremento 25.01.20 в 08:14 Возможно, я буду говорить "по-видимому мыслимо" в отношении такой информации, которую сторонники зомби получают, воображая Миры Зомби, а "логически возможно" в отношении такой информации, которая возникает после представления завершенной модели или логического доказательства. Обратите внимание на разницу между информацией, которую можно получить, закрыв глаза и представив себе зомби, и информацией, которая необходима для построения аргумента к тезису эпифеноменализма. niya3 15.08.20 в 19:56 |
||
|
Так, ваши взгляды можно представить в форме материализма Типа А, а именно, что о зомби нельзя даже (искренне) помыслить, не говоря уже о метафизической возможности. sepremento 25.01.20 в 08:16 То есть, вашу позицию можно отнести к материализму типа А, а именно: зомби (поистине) немыслимы, не говоря уже о метафизической возможности. niya3 15.08.20 в 20:01 |
||
|
Материализм Типа А --- это большой пакет. Не следует присваивать мне этот пакет, пока не увидишь, что я согласен с каждой частью. Я считаю, тот, кто задаёт вопрос "Что есть сознание?" --- задаёт правомочный вопрос и имеет право на озарение. Но вовсе необязательно, что ответ имеет форму "Вот штука, она обладает всеми свойствами обычно присущими сознанию по таким-то и таким-то причинам", но может в некоторой степени состоять из озарений, которые заставят понять, что вопрос был задан неверно. sepremento 25.01.20 в 08:23 Материализм типа А --- это большой пакет. Не следует сопоставлять этот пакет со мной, пока не увидите, что я согласен с каждой его частью. Я считаю, что задающийся вопросом "Что есть сознание?", задаёт правомочный вопрос и движим жаждет откровения. Вовсе необязательно, что это будет ответ в стиле "Вон та штука, обладающая всеми свойствами, которые обычно присущи сознанию по тем-то и тем-то причинам". Но ответ может до какой-то степени состоять из озарений, которые приведут к пониманию, что сам вопрос был задан неверно. niya3 15.08.20 в 20:14 |
||
|
Такая позиция не разрушает концепцию сознания. Это позиция реалиста в отношении вопроса, какого рода озарений стоит ожидать. Особенно, когда сталкиваешься с задачей, которая (1) кажется, будто должна иметь решение, (2) кажется, как будто не может иметь каких-либо решений и (3) обсуждать её приходится с опорой на до конца не понятную, собранную по случаю, модель архитектуры человеческого мышления. sepremento 25.01.20 в 08:29 Всё это не про одно лишь сознание. Всё это про реалистичные ожидания того, какие озарения могут возникать при столкновении с задачей, которая (1) кажется, будто должна иметь какое-нибудь решение, (2) кажется, будто не может иметь никаких решений и (3) обсуждать её приходится с опорой на не до конца понятную ad-hoc модель человеческого мышления. niya3 15.08.20 в 20:24 |
||
|
(1) До сих пор, насколько я могу судить, вы не определили какого-либо логического противоречия в описании мира зомби. Вы лишь указали, что он будет как бы странным. Однако можно помыслить множество чудных миров. Это не причина указывать внутреннее противоречие. Поэтому для меня до сих пор остаётся загадкой, что же это за противоречие такое. sepremento 25.01.20 в 08:32 (1) Насколько я могу судить, вы до сих пор не установили какого-либо логического противоречия в описании мира зомби. Вы лишь указали, что он типа странный. Однако существует множество возможных чудных миров. Это не причина постулировать внутреннее противоречие. Поэтому мне до сих пор совершенно не ясно, о каком таком противоречии шла речь. niya3 15.08.20 в 20:25 |
||
|
Хорошо, я распишу всё с позиции материалиста: sepremento 25.01.20 в 08:32 |
||
|
1. Мир зомби, по определению, содержит все части нашего мира, все наблюдаемые феномены, которые связаны конфигурациями "вызвано тем-то" или "является эффектом того-то". В частности, он содержит причину моего видимого высказывания "я мыслю, следовательно, существую". sepremento 25.01.20 в 08:34 1. Мир зомби, по определению, содержит все части нашего мира, которые входят в замыкание множества наблюдаемых явлений относительно связей "вызвано тем-то" или "является эффектом того-то". В частности, это замыкание содержит причину моего зримого высказывания "я мыслю, следовательно, существую". niya3 15.08.20 в 20:36 |
+2 | |
|
2. Когда я сосредотачиваюсь внутренним взором на своём внутреннем взоре, я могу вскоре ощутить, как мой внутренний рассказчик скажет: "я сосредотачиваю свой внутренний взор на моём внутреннем взоре" и могу, если захочу, произнести это вслух. sepremento 25.01.20 в 08:36 2. Если я сосредоточу внутренний взор на своём внутреннем взоре, то впоследствии замечу, как мой внутренний рассказчик скажет: "я сосредотачиваю свой внутренний взор на своём внутреннем взоре" и при желании могу произнести это вслух. niya3 15.08.20 в 20:39 |
||
|
3. Интуитивно кажется, будто эта моя внутренняя сосредоточенность заставляет внутреннего рассказчика произносить определённые вещи, а внутренний рассказчик может заставить мои губы произносить некоторые вещи. sepremento 26.01.20 в 08:15 |
||
|
4. Слово "сознание", если оно вообще что-либо значит, имеет отношение к тому-что-внутри или к тому-что-является-причиной или к тому-что-заставляет-меня-говорить-"у меня есть внутренний взор" sepremento 26.01.20 в 08:16 Слово "сознание", если оно вообще что-либо значит, отсылает к тому-что-есть или к тому-что-есть-причина или к тому-что-заставляет-меня-говорить-что-у-меня-есть внутренний взор. niya3 15.08.20 в 20:42 |
||
|
5. Из (3) и (4) должно следовать, что если мир зомби ограничен в отношении причин говорить "я мыслю, следовательно, существую", то мир зомби содержит нечто, что мы называем "сознанием". sepremento 26.01.20 в 08:18 5. Из (3) и (4) должно следовать, что если мир зомби замкнут и включает в себя причины, которые заставляют меня говорить «я мыслю, следовательно, существую», тогда мир зомби содержит нечто, на что мы ссылаемся, когда говорим про «сознание». niya3 15.08.20 в 21:00 |
||
|
6. По определению, мир зомби не содержит сознания. sepremento 26.01.20 в 08:18 |
||
|
7. Мне кажется, что (3) имеет довольно высокую вероятность эмпирической истинности. Таким образом, я оцениваю как высокую, вероятность, что мир зомби логически невозможен. sepremento 26.01.20 в 08:19 7. Мне кажется, что (3) весьма вероятно должно быть эмпирически истинным. Поэтому я присваиваю высокую вероятность тому, что мир зомби логически невозможен. niya3 16.08.20 в 19:50 |
||
|
Можно спасти Мир Зомби, дозволив чему-то иному, а не сознанию, стать причиной моему внутреннему рассказчику говорить "я мыслю, следовательно, существую". В сочетании с предположением, что сознание существует, эта мысль кажется мне безрассудной. sepremento 26.01.20 в 08:21 Мир Зомби можно спасти, дозволив чему-то иному, а не сознанию, быть той причиной, вынуждающей моего внутреннего рассказчика говорить "я мыслю, следовательно, существую". В сочетании с допущением, что сознание всё же существует, эта мысль кажется мне чокнутой. niya3 16.08.20 в 19:55 |
||
|
Но если всё вышеуказанное осознаваемо, то разве Мир Зомби не является осознаваемым? sepremento 26.01.20 в 08:21 Но если всё вышеуказанное можно себе представить, то разве нельзя представить себе и Мир Зомби? niya3 16.08.20 в 19:56 |
||
|
Нет, потому что две структуры в Мире Зомби используют присваивание слову "сознание" разных эмпирических отсылок, наподобие "воды" в нашем мире со значением H2O и "воды" на Земле-близнеце по версии Патнэм со значеним XYZ. Чтобы Мир Зомби был логически возможен, недостаточно заявить, что слово "сознание", с учётом всего, что мы знаем об устройстве мира, можно соотнести с некоторым эпифеноменом, совершенно непохожем на сознание, известное нам. В Мире Зомби отсутствует сознание, а не "сознание" --- это мир без H2O, а не мир без "воды". Вот что нужно для выведения утверждения "можно удалить нечто подразумеваемое под словом 'сознание' из нашего мира, оставив все атомы на том же месте". sepremento 26.01.20 в 08:29 Нет, поскольку в двух фактах, положенных в основу Мира Зомби, слово "сознание" указывает на две эмпирически различающиеся вещи. Это как "вода", которая означает H20 в нашем мире, и XYZ на планете-близнеце Земле у Патмэна. Для того, чтобы Мир Зомби был логически возможен, недостаточно заявить, учитывая накопленные нами знания об устройстве эмпирического мира, что слово "сознание" может соотноситься с некоторым эпифеноменом, совершенно непохожем на сознание, известное нам. В Мире Зомби отсутствует сознание, а не "сознание" --- это мир без H2O, а не мир без "воды". Именно это необходимо для поддержания эмпирического утверждения "Можно удалить нечто, подразумеваемое под словом ''сознание'' из нашего мира, оставив все атомы на том же месте". niya3 16.08.20 в 20:23 |
+5 | |
|
Это равносильно высказыванию: Я считаю эмпирическим фактом, при условии постоянства феномена, к которому относится слово "сознание", что логически невозможно удалить сознание, не передвигая при этом атомы. Я не стану спекулировать, что будет означать удаление из мира не сознания, а "сознания". sepremento 26.01.20 в 08:31 Иначе говоря: я считаю эмпирическим фактом, что если выяснить, на что именно ссылается слово "сознание", то логически невозможно удалить сознание, не потревожив при этом ни единого атома. Я не собираюсь рассуждать, что будет означать удаление из мира "сознания", а не сознания. niya3 16.08.20 в 20:28 |
||
|
(2) Заявление, что соответствие наших квалий физическому миру "чудесно" (с позиций дуалиста), вызывает путаницу. В конце концов, это гарантируют законы Природы. Это не более чудесно, чем любая другая логически связная необходимость (например, константы наших законов физики). sepremento 26.01.20 в 08:33 (2) Заявление, что соответствие наших квалий физическому миру "чудесно" (с точки зрения вещественного дуалиста), вызывает путаницу. В конце концов, это то, что гарантируется законами природы. Это не более чудесно, чем любая другая логически связная закономерная необходимость (например, значения констант в наших законах физики). niya3 16.08.20 в 20:34 |
+5 | |
|
Говорить, что законы Природы сами по себе "чудесны" --- дополнительный усложняющий элемент теории, который требует постулата, поскольку не определен в терминах, которые мы уже знаем. Постулируется, что (а) внутренний мир, обладающий сознанием, (б) неисправный внешний мир, что говорит о сознании без причины и (в) что оба идеально сосуществуют. Утверждение (в) не следует из (а) и (б), следовательно, это отдельный постулат. sepremento 26.01.20 в 08:39 Утверждать, что законы природы "чудесны" сами по себе --- значит вводить дополнительный сложный и невероятный элемент теории, который не опирается на то, что мы уже знаем. Постулируются, (а) сознательный внутренний мир, (б) неисправный внешний мир, который беспричинно рассуждает о сознании, и (в) что оба мира идеально сосуществуют. Утверждение (в) не следует из (а) и (б), следовательно, это отдельный постулат. niya3 16.08.20 в 20:48 |
||
|
Согласен, что такое использование слова "чудесный" конфликтует с философским восприятием нарушения закона Природы. Я использовал его в смысле невероятности возникновения из ниоткуда, вроде убеждения о вечном двигателе. Это неправильное слово с учётом контекста. Но разве мы не должны интуитивно называть вещи такого рода чудом? Не сознание заставляет вас говорить, что вы обладаете сознанием, а отдельная физическая штуковина. Но существует закон, который приводит эти две вещи в соответствие друг другу --- и это по сути та же степень сумасшествия, что и крекер, заменяющий плоть Христа, но при этом сохраняющий внешний вид и проявления крекера. Это закон природы такой, гарантирующий соответствие двух вещей, понимаете? sepremento 27.01.20 в 08:23 Согласен, что такое использование слова "чудесный" конфликтует с философским пониманием нарушения законов природы. Я использовал его в смысле возникающей из ниоткуда невероятности, как в убеждении о вечном двигателе. В данном контексте это неподходящее слово. Но разве мы не должны интуитивно называть вещи такого рода чудом? Не сознание заставляет вас говорить, что вы обладаете сознанием, а отдельная физическая штуковина, и существует закон, который приводит эти две вещи в соответствие друг другу. Это ведь так же упорото, как печенье, которое заменяет плоть Христа, но при этом выглядит и ведёт себя точь-в-точь как печенье. Это закон природы такой, гарантирующий соответствие двух вещей, понимаете? niya3 16.08.20 в 20:56 |
+1 | |
|
А именно, Зомби (или "внешний") Чалмерс не делает никаких выводов, поскольку его речи бессмысленны. И уж тем более он не делает каких-либо безосновательных выводов. Он просто производит звуки, не более достойные эпистемической оценки, чем пение птиц. sepremento 27.01.20 в 08:25 Таким образом, Зомби (или "внешний") Чалмерс фактически не делает никаких выводов, поскольку его разглагольствования бессмысленны. И уж тем более он не делает каких-либо безосновательных выводов. Он просто производит звуки, не более достойные эпистемической оценки, чем пение птиц. niya3 16.08.20 в 21:01 |
||
|
С позиций разработчика ИИ, мне кажется, должна быть возможность создать ИИ, что будет систематически улучшать то внутреннее устройство самого себя, которое коррелирует (в терминах общей информации и системных отношений) с окружающей средой, возможно, с использованием чисел с плавающей точкой того рода, что я обычно называю "вероятностью", коль скоро они подчиняются правилам, заданным теоремами Коха, при встрече ИИ с новой информацией, то есть, прошу прощения, новыми чувственными вводными. sepremento 27.01.20 в 08:30 С позиций разработчика ИИ, мне кажется, должна быть возможность создать ИИ, который будет систематически улучшать ту внутреннюю часть себя, которая коррелирует (в терминах общей информации и системных отношений) с окружающей средой, возможно, используя числа с плавающей точкой для выражения того, что я обычно называю "вероятностью", коль скоро они подчиняются внутренним правилам, заданным теоремами Коха, когда ИИ встречается с новой информацией. То есть, прошу прощения, с новыми чувственными вводными. niya3 16.08.20 в 21:08 |
+1 | |
|
Вы можете заявить, что до тех пор, пока ИИ это всего лишь транзисторы --- до тех пор, пока у него нет двойственности --- у ИИ нет убеждений. sepremento 27.01.20 в 08:30 Вы можете заявить, что до тех пор, пока ИИ это всего лишь транзисторы --- до тех пор, он не обладает дуальностью --- у ИИ нет убеждений. niya3 16.08.20 в 21:09 |
||
|
Я считаю, что моя точка зрения на эту тему была довольно изложена в "Простой истине". sepremento 27.01.20 в 08:31 Я считаю, что достаточно ясно высказался на эту тему в "Простой истине". niya3 16.08.20 в 21:09 |
||
|
Мне кажется очевидным создавать карты, которые систематически коррелируют с территориями без упоминания чего бы то ни было, кроме чистой причинно-следственной связи. Пусть ИИ создаёт карту Техаса. Другой ИИ пролетает с картой над Техасом и проверяет, что шоссе расположены в указанных местах и даёт сигнал "Истина", когда обнаруживает совпадение и "Ложь", когда совпадения нет. Можно отказаться называть это "картой Техаса", но ИИ продолжат подавать сигналы "Истина" или "Ложь", и те же самые ИИ дадут сигнал "Ложь" после рассмотрения убеждения Чалмерса об эпифеноменальном внутреннем ядре, а я с ними соглашусь. sepremento 27.01.20 в 08:38 Мне кажется очевидным создавать карты, которые систематически коррелируют с территориями, не обращаясь ни к чему, кроме чистой физической причинности. Допустим, один ИИ создаёт карту Техаса. Другой ИИ пролетает с этой картой над Техасом и проверяет, что шоссе расположены в указанных местах и издаёт сигнал "Истина", обнаружив соответствие и "Ложь", обнаружив несоответствие. Можно отказаться называть это "картой Техаса", но ИИ продолжат подавать сигналы "Истина" или "Ложь". Рассмотрев убеждения Чалмерса об эпифеноменальном внутреннем ядре, вышеупомянутые ИИ дадут сигнал "Ложь", а я с ними соглашусь. niya3 16.08.20 в 21:16 |
||
|
Очевидно, что функция построения карты реальности выполняется исключительно Внешним Чалмерсом. Вся процедура производства убеждений управляется байесианской структурой из причинно-следственных взаимодействий. Внутреннему Чалмерсу нечего делать, разве что освящать всё происходящее эпифеноменальной значимостью. И здесь "значимость" --- нечто совершенно не связанное с отношениями между картой и территорией или возможностью использовать карту для движения по реальности. Поэтому, когда речь заходит о "точности", не говоря уже о "систематической точности", мне кажется, что её можно определять, глядя исключительно на Внешнего Чалмерса. sepremento 29.01.20 в 08:14 Очевидно, что функция построения карты реальности выполняется исключительно Внешним Чалмерсом. Вся процедура производства убеждений управляется байесианской структурой из причинно-следственных взаимоотношений. Внутреннему Чалмерсу чем заняться, разве что освящать всё происходящее эпифеноменальной значимостью. И здесь "значимость" --- нечто совершенно не связанное с отношениями между картой и территорией или с возможностью использовать карту для перемещений по реальности. Поэтому, когда речь заходит о "точности", не говоря уже о "систематической точности", мне кажется, что её можно определять исключительно ориентируясь на Внешнего Чалмерса. niya3 17.08.20 в 18:18 Очевидно, что карту реальности строит исключительно Внешний Чалмерс. Убеждения создаются исключительно байесовской структурой на основе причинно-следственных связей. Внутреннему Чалмерсу остаётся лишь освящать происходящее эпифеноменальной значимостью. И "значимость" здесь никак не связана с отношениями между картой и территорией или с возможностью использовать карту для перемещений по реальности. Поэтому, когда речь заходит о "точности", не говоря уже о "систематической точности", мне кажется, мы можем ориентироваться исключительно на Внешнего Чалмерса. Alaric 21.08.20 в 20:16 |
+1 | |
|
(Б) Во вчерашнем тексте, я упустил предположение, когда писал: sepremento 29.01.20 в 08:15 (Б) Во вчерашнем тексте я оставил допущение, когда писал: niya3 17.08.20 в 18:19 |
||
|
Если ИИ, способный к самоулучшению, смотрит на часть себя, которая делает вывод "B" при условии А --- то есть, ту часть, что записывает "В" в память всегда, когда А истинно --- затем исследует эту часть, изучает, как она действует (через причинно-следственные связи) в контексте вселенной и решает, что эта часть склонна систематически записывать ложные данные в память, то похоже, что ИИ нашёл у себя баг и перепрограммирует себя так, чтобы не записывать "В" в пул убеждений при условии А. sepremento 29.01.20 в 08:21 Допустим, что самосовершенствующийся ИИ обратится к той части себя, которая выводит "Б" из при наличии А --- то есть, записывает в память "Б", если истинно условие А. Исследовав эту часть, ИИ определяет, каким образом она (причинно) действует в контексте большей вселенной, и решает, что эта часть систематически записывает в память ложные данные. В этом случае ИИ обнаружил нечто, похожее на баг, и изменит себя так, чтобы не записывать "Б" в область убеждений при наличии А. niya3 17.08.20 в 18:47 |
+1 | |
|
... sepremento 29.01.20 в 08:21 |
||
|
Однако нет какой-либо гарантии, что внешний Чарлмерс или иной рефлексивно непротиворечивый самоулучшающийся ИИ будет верить в эту загадочную правильность. Хорошим дизайном ИИ будет, на мой взгляд, рефлексивно непротиворечивый интеллект, у которого будет проверяемая теория собственной работы как системы вывода причинно-следственных связей, а следовательно, проверяемая теория производства такой системой точных убеждений на пути к достижении ею своих целей. sepremento 29.01.20 в 08:27 Однако нет совершенно никакой гарантии, что внешний Чарлмерс или иной рефлексивно согласованный самосовершенствующийся ИИ поверит в эту загадочную правильность. На мой взгляд, хорошо спроектированный ИИ будет рефлексивно согласованным интеллектом, который обладает проверяемой теорией собственной работы как каузальной системы, а следовательно --- проверяемой теорией того, как такая каузальная система производит систематически точные убеждения на пути к достижению своих целей. niya3 17.08.20 в 18:57 |
+1 | |
|
По сути, необходимо ещё одно допущение, а именно, что "хорошо спроектированный ИИ" (по крайней мере, в моём представлении) судит о собственной рациональности модульно. То есть он обеспечивает свою общую рациональность через обеспечение локальной рациональности. Если возникает элемент, который в контексте вселенной систематически ненадёжен локально --- то есть из набора возможных убеждений "Bi" и условий Ai, в пул убеждений добавляется некоторое "Bi" при локальном условии Ai и после рефлексии система показывает, что Bi ложно (или в смысле вероятностных убеждений, не точно) при истинности локального условия Ai --- тогда мы имеем дело с багом. Такое модульное устройство позволяет отслеживать проблемы и я считаю, что таким будет устройство ИИ первого поколения [Редакция 2013: То, что я имел в виду здесь, обрело плоть и формализовано в статье Tiling Agents for Self-Modifying AI, часть 6.] sepremento 30.01.20 в 08:49 По сути, необходимо ещё одно допущение, а именно, что "хорошо спроектированный ИИ" (по крайней мере, в моём представлении) модульно рассуждает о собственной рациональности. То есть он обеспечивает свою общую рациональность через обеспечение локальной рациональности. Если обнаружен элемент, который в собственном контексте систематически ненадёжен локально --- то есть из набора возможных убеждений "Бi" и условий Аi, в область убеждений добавляется некоторое "Бi" при локальном условии Аi и после рефлексии система показывает, что Бi ложно (или не точно, в случае вероятностных убеждений) при истинности локального условия Ai --- то это баг. Такое модульное устройство позволит отслеживать проблемы и именно таким я вижу устройство ИИ первого поколения [Редакция от 2013: То, что я имел в виду здесь, обрело плоть и формализовано в разделе 6 статьи "Tiling Agents for Self-Modifying AI".] niya3 17.08.20 в 19:07 |
||
|
Идея в том, что когнитивная система, ограниченная причинно-следственными связями --- такая как ИИ, запрограммированный использовать только эффективные свои элементы, или ИИ, собственная теория функционирования которого может быть им самим проверена, или внешний Чалмерс, что пишет философские статьи --- которая верит, что у неё есть эпифеноменальное внутреннее "Я", должна делать нечто систематически ненадёжное, поскольку то же самое заключение она сделает в Мире Зомби. Разум, все части которого систематически локально надёжны в соответствующих контекстах, будет систематически надёжен в общем. Следовательно, разум, который ненадёжен глобально должен содержать как минимум одну ненадёжную локальную часть. Поэтому когнитивная система, ограниченная причинно-следственными связями при проверке себя на локальную надежность обнаружит, что как минимум один шаг в рассуждениях при добавлении убеждения об эпифеноменальном внутреннем "Я" ненадёжен. sepremento 30.01.20 в 08:56 Идея в том, что если каузально замкнутая когнитивная система --- например, ИИ, запрограммированный использовать только причинно действующие свои части, или ИИ, теория функционирования которого может быть проверена им самим, или внешний Чалмерс, который пишет философские статьи --- верит, что у неё есть эпифеноменальное внутреннее "Я", то видимо она делает нечто систематически ненадёжное, поскольку она пришла бы к точно таким же выводам и в Мире Зомби. Разум, все части которого систематически локально надёжны в соответствующих контекстах, будет систематически надёжен в общем. Следовательно, разум, который ненадёжен в общем, содержит как минимум одну ненадёжную локальную часть. Поэтому, проверив свою локальную надёжность, каузально замкнутая когнитивная система обнаружит, что как минимум один шаг в рассуждениях при добавлении убеждения об эпифеноменальном внутреннем "Я" является ненадёжным. niya3 17.08.20 в 19:21 |
||
|
Если разум может быть последовательным в рефлексии каким-то иным способом и избежать этого доказательства о невозможности верить в зомби, то предлагаю философам сделать попытку указать на него. sepremento 30.01.20 в 08:58 Приглашаю философов указать на иные подходы, в которых разум может быть рефлексивно согласованным, и при этом не затрагивалось бы данное доказательство невозможности веры в зомби. niya3 17.08.20 в 19:28 |
+1 | |
|
Если не уточнить специальным образом всё вышесказанное, можно получить очень доступный способ рефлексивной непротиворечивости, при котором ИИ никогда не назовёт себя ненадёжным. Так, например, если ИИ обнаружит часть себя, которая вычислит 2+2=5 (в контексте подсчёта овец), то он помыслит: "О, эта часть работает неправильно и утверждает, что 2+2=5... однако, какое совпадение, 2+2 и в самом деле равно 5 или так мне кажется... так что даже несмотря на кажущуюся ненадёжность этой части, я лучше её сохраню как есть, иначе не удастся обработать этот особый случай." Поэтому я говорю об обеспечении надёжности в общем через обеспечение локальной систематической надёжности --- если просто сравнивать глобальные убеждения с глобальными убеждениями, проку не будет. sepremento 30.01.20 в 09:03 Всё это нужно было отметить для того, чтобы показать, что иначе можно остановиться на весьма низкокачественной рефлексивной согласованности, в которой ИИ никогда не назовёт себя ненадёжным. Например, если ИИ обнаружит часть себя, которая вычислит 2+2=5 (в контексте подсчёта овец), то он помыслит: "Так, эта часть работает неправильно и утверждает, что 2+2=5... однако, какое совпадение, 2+2 и в самом деле равно 5, или мне так кажется... так что, даже не смотря на кажущуюся систематическую ненадёжность данной части, лучше бы сохранить её как есть, иначе не удастся правильно обработать этот особый случай." Поэтому я говорю об обеспечении общей надёжности через обеспечение локальной систематической надёжности --- если просто сравнивать убеждения в общем с убеждениями в общем, проку не будет. niya3 17.08.20 в 19:35 |
+1 | |
|
Отсюда можно извлечь урок: Показывай глобальную надёжность своих суждений через демонстрацию локальной надёжности каждого шага. Избегай простого сравнения выводов суждения со своей интуицией [Редакция 2013: обсуждение факта, что валидная логика является валидной локально см. в статье Proofs, Implications, and Models] sepremento 30.01.20 в 09:06 Отсюда можно извлечь урок: Показывай общую надёжность своих суждений демонстрируя локальную надёжность каждого отдельного шага. Избегай простого сравнения выводов суждения со своей интуицией [Редакция от 2013: обсуждение факта, что валидная логика является валидной локально см. в заметке "Proofs, Implications, and Models"] niya3 17.08.20 в 19:43 |
||
|
(В) Анонимный автор написал: sepremento 29.01.20 в 08:27 |
||
|
Постороннее замечание, однако, мне кажется, что используемая вами этимология слова "н'шама" неверна. Оно связано со словом, обозначающим "дышать", а не "слышать". Корень слова "слышать" содержит айин, а н'шама такой корень не содержит. sepremento 29.01.20 в 08:30 Оффтоп: мне кажется, что используемая вами этимология слова "н'шама" неверна. Оно связано со словом, обозначающим "дышать", а не "слышать". Корень слова "слышать" содержит букву [айин](https://ru.wikipedia.org/wiki/%D0%90%D0%B8%D0%BD_(%D0%B1%D1%83%D0%BA%D0%B2%D0%B0_%D0%B5%D0%B2%D1%80%D0%B5%D0%B9%D1%81%D0%BA%D0%BE%D0%B3%D0%BE_%D0%B0%D0%BB%D1%84%D0%B0%D0%B2%D0%B8%D1%82%D0%B0)), а н'шама --- нет. niya3 17.08.20 в 19:47 |
||
|
Вот что я называю удивительно обманчивым совпадением --- несмотря на то, что слово Н'Шама всплыло из совершенно иных соображений, оно звучало исключительно так, чтобы заставить меня считать, что оно имеет отношение к внутреннему слушателю. sepremento 29.01.20 в 08:31 |
||
|
Упс. sepremento 29.01.20 в 08:31 |
