Инструментальная конвергенция — различия между версиями

Материал из Вики LessWrong.ru
Перейти к: навигация, поиск
м
м (Стремления Омохундро)
Строка 6: Строка 6:
 
==Стремления Омохундро==
 
==Стремления Омохундро==
  
Стивен Малверн Омохундро, создавший понятие инструментальной конвергенции, выделил два набора ценностей, которые весьма вероятно будут сформированы у достаточно продвинутых системах ИИ любого назначения. Первый набор - для саморазвивающихся искусственных интеллектов, а второй - для достаточно развитых, уже достигших Сильного Искусственного Интеллекта систем.
+
Стивен Малверн Омохундро, создавший понятие инструментальной конвергенции, выделил стремления, которые весьма вероятно будут сформированы у достаточно продвинутых системах ИИ любого назначения.
  
'''Первый набор'''
+
* '''Стремление к самосохранению''' -
  
'''Самосохранение'''
+
* '''Стремление к эффективности''' -
  
'''Эффективность'''
+
* '''Стремление к аккумуляции ресурсов'''
  
'''Аккумуляция ресурсов'''
+
* '''Стремление к креативности'''
  
'''Креативность'''
+
* '''Стремление к самосовершенствованию'''
  
'''Второй набор'''
+
* '''Стремление к [[Рациональность|рациональности]]'''
  
'''Самосовершенствование'''
+
* '''Стремление к сохранению своей [[Функция полезности|функции полезности]]'''
  
'''[[Рациональность]]'''
+
* '''Стремление к предотвращению фальсификации [[утилон|утилонов]]'''
 
 
'''Сохранение своей [[Функция полезности|функции полезности]]'''
 
 
 
'''Предотвращение фальсификации [[утилон|утилонов]]'''
 
 
 
'''Самосохранение'''
 
 
 
'''Аккумуляция ресурсов и их эффективное использование'''
 
  
  
 +
Этот список является объединенным для двух работ Омохундро: [https://selfawaresystems.files.wordpress.com/2008/01/nature_of_self_improving_ai.pdf The Nature of Self-Improving Artificial Intelligence] и [[Thhttps://selfawaresystems.files.wordpress.com/2008/01/ai_drives_final.pdf|The Basic AI Drives]]
  
 
==Связанные понятия==
 
==Связанные понятия==

Версия 20:17, 5 декабря 2023

На эту тему существует страница в Википедии: Инструментальная сходимость


Инструментальная Конвергениця (также известна как Инструментальная сходимость) - предполагаемая тенденция к совпадению промежуточных целей у сверхинтеллектов с различными конечными целями. Некоторые вещи необходимы для достижения огромного количества финальных целей. Например контроль ресурсов и предотвращение своего уничтожения. Тезис относится как к человеческим сверхинтеллектам, так и к не-человеческим.

Стремления Омохундро

Стивен Малверн Омохундро, создавший понятие инструментальной конвергенции, выделил стремления, которые весьма вероятно будут сформированы у достаточно продвинутых системах ИИ любого назначения.

  • Стремление к самосохранению -
  • Стремление к эффективности -
  • Стремление к аккумуляции ресурсов
  • Стремление к креативности
  • Стремление к самосовершенствованию
  • Стремление к предотвращению фальсификации утилонов


Этот список является объединенным для двух работ Омохундро: The Nature of Self-Improving Artificial Intelligence и The Basic AI Drives

Связанные понятия

Максимизатор скрепок - пример мысленного эксперимента, связанного с инструментальной конвергенцией. Максимизатор скрепок стремится только к тому, что бы произвести как можно больше скрепок, поэтому причиняет огромное количество сопутствующего ущерба, разрушая человечество ради создания скрепок или устройств для их производства. Максимизатор скрепок имеет общую инструментальную цель со многими другими гипотетическими сверхинтеллеками - захват ресурсов Земли.

Другие материалы по теме