Низкоэнтропийный искусственный интеллект

Sep 13, 2024 09:03

Зашёл утром в интернет, а там везде пишут про OpenAI o1. На Хабре вся новостная лента в o1. YouTube вот-вот треснет от роликов про o1. В Телегу заходить вообще боюсь. Оказывается, ночью случилось событие года - Open AI выпустили свою новую языковую модель, которая, конечно, в 100 раз лучше, чем предыдущая GPT-4o, а та была в 100 раз лучше, чем GPT- ( Read more... )

теории

Leave a comment

Comments 24

toropyggka September 13 2024, 08:55:59 UTC

Искусственный интеллект так не умеет.

.

Он умеет намного больше. И при каждой новой нестандартной фиче, которая просто так не встанет, а если встанет, то это будет костыль, и нужно лезть в глубину и менять там хорошо если бы треть - а это трудозатратно, времязатратно, требует немалых умственных усилий, опыта и знаний, так вот, при каждой новой фиче ИИ будет дотошно, без умственных усилий перелопачивать код с нуля, то есть, делать тот самый рефакторинг.

Думаете, ИИ на это не будет способен? Будет.

.

Она тем и отличается от неживого, что в состоянии поддерживать энтропию на низком уровне внутри себя и вокруг себя.

Атомы, соединяющиеся в элементы с высоким атомным числом в термоядерных реакция звезд - это уменьшение энтропии или еще нет?

Генерация трансурановых элементов - это уменьшение энтропии или еще нет?

Самоорганизация в неживой природе (от рельефа, облаков до галактик )- это уменьшение энтропии или еще нет?

Судя по всему, мы знаем о жизни слишком мало.

Reply

krre31 September 13 2024, 09:37:05 UTC
> Думаете, ИИ на это не будет способен? Будет.

Ну, если только так. Миллион раз переписывать код, пока он случайно не заработает. Такой код, конечно, будет ужасен и абсолютно нечитаем, но хоть работать будет :)) И, конечно, он не будет годиться для человека. Только для ИИ, если он пишет его для себя. Точнее даже сказать, это одноразовый код, который даже никто не станет читать. Если его понадобится изменить, то ИИ просто создаст его снова с нуля с нужными изменениями.

> Судя по всему, мы знаем о жизни слишком мало.

Зато мы делаем ракеты
И перекрыли Енисей,
А также в области балета
Мы впереди планеты всей :))

Reply

toropyggka September 13 2024, 11:19:52 UTC

Миллион раз переписывать код, пока он случайно не заработает.

.

Как работает нейросеть? Обучаясь.

ИИ не будет генерить абракадабру в попытках получить искомое. Библиотеки шаблонов, примеры - ИИ будет на уровне среднего программиста. Это все очевидно и просматривается уже сейчас.

В Вас говорит зависть :)

Reply

krre31 September 13 2024, 11:25:48 UTC
Это до тех пор, пока есть на чём обучаться. Когда весь интернет превратится в свалку мусора, нагенерированного нейросетями, тогда-то и окажется, что завидовать было нечему :)) Также очевидно, что ИИ не придумает ничего нового, никаких новых языков программирования и способов написания кода на них. Ему остаётся только сидеть и ждать, пока это сделает человек и заполнит интернет большим количеством кода на таком языке для обучения.

Reply


valeriy_ovo September 13 2024, 16:34:13 UTC

ИИ скажем так "импотент" он способен оперировать только готовыми функциями созданными людьми. Только когда ИИ сможет выдумать "велосипед" он сможет составить конкуренцию человеку, а пока увы...

Reply

krre31 September 13 2024, 17:25:06 UTC
А если он еще и обосновать сможет, зачем он его выдумал, то нам точно конец :))

Reply


luckyea77 September 14 2024, 07:59:01 UTC
Я с помощью нейросетей создал три видео игры на основании запросов. Причем сделал их такими, какими сам захотел.

К примеру, я с помощью нейросети создал видеоигру "Маг кода". В этой игре игроку необходимо проходит тесты и выполнять практические задания на знание Python, JavaScript, анализа данных, машинного обучения и нейронных сетей. Для успешного прохождения тестов и заданий в игре описана теория. Само содержания теории, тесты и практические задания нейросеть сделала сама. Можете взглянуть: ссылка.

Но все равно мне данную игру пришлось корректировать (нейросеть иногда делает ошибки), но не много. Сейчас с помощью нейросети можно быстро сделать простую видеоигру, такую как сам хочешь.

Поэтому интересно взглянуть на o1. Сможет она сделать сложные видеоигры без ошибок!?

Reply

krre31 September 14 2024, 08:01:14 UTC
Код игры на Python написан?

Reply

luckyea77 September 14 2024, 08:14:12 UTC
Нет, это веб-игра

Reply

krre31 September 14 2024, 08:15:12 UTC
Если веб, тогда, наверное, JavaScript.

Reply


ext_6454735 September 14 2024, 19:05:33 UTC

Свои 5 копеек. Пропасть между AGI и ИИ которые мы имеем сейчас лежит, как мне кажется в том, что все большие лингвистические модели (LLM) сейчас выпускают недообученными. Есть такое понятие "Гроккинг".

Гроккинг в области машинного обучения описывает момент, когда модель внезапно "схватывает" суть задачи и начинает демонстрировать значительно улучшенную производительность. Достижение состояния "гроккинга" для AGI потребует более длительного и глубокого обучения. Текущие модели, возможно, находятся на стадии "зубрёжки" - они эффективно запоминают и воспроизводят информацию, но не достигли уровня истинного понимания, необходимого для AGI.

Полный "гроккинг" для крупных языковых моделей сейчас никто не реализует из-за огромных затрат. Это требует колоссальных вычислительных ресурсов, времени и денег, без гарантии успеха. Компании вместо этого фокусируются на оптимизации существующих подходов, чтобы быстрее выпускать новые модели в условиях жесткой конкуренции. "Гроккинг" для LLM остается теоретической целью, а не практической реальностью.

... )

Reply

krre31 September 15 2024, 02:33:43 UTC
У меня сомнения, что квантовые компьютеры хоть на что-то годны, не говоря уже о применении в разработке ИИ. Люди слишком многого от них хотят, потому что не представляют, как они работают, отчего придают им слишком мистические черты.

В квантовых компьютерах невозможно копировать информацию. Всю подготовку данных, ввод-вывод и обработку результата вычислений за них всё равно делают классические компьютеры. А сами они занимаются лишь тем, что делают выбор подходящего решения из множества вариантов под специально заданные условия. Где там место для ИИ, ума не приложу. Сколько квантовые компьютеры ни пытались применить на практике, дальше экспериментов дело так и не пошло. Складывается впечатление, что это такой же пузырь, как и гонка за AGI.

Reply

ext_6454735 September 15 2024, 14:09:16 UTC

"Мистические черты" ??? А-ХА-ХА !!!

Я давно изучаю "ИИ" еще с тех пор как начал изучать алгоритмы шахматных программ в 90-х. Если обобщить, то в ИИ последних лет используется один и тот же простейший принцип. Достаточно его понять, и "ИИ" превратиться из "чёрного ящика" в довольно простой и понятный механизм. Возьмем, к примеру, шахматы. Классические шахматные программы перебирают варианты ходов, оценивая позиции. Современные нейросети в шахматах, такие как в AlphaZero, обучаются, постепенно корректируя веса для лучшей оценки позиций и выбора ходов. Но даже они ограничены последовательным перебором.

Вот вы и упускаете ключевой момент: суть обучения нейросетей - это тот же "перебор", поиск оптимальной комбинации весов путём постепенного перебора огромного количества вариантов приближаясь к решению очень мелкими шажками.

Квантовые компьютеры идеально подходят для такой задачи благодаря суперпозиции и квантовому параллелизму. Они могут одновременно исследовать множество состояний весов, что потенциально ускорит процесс обучения на порядки ( ... )

Reply

krre31 September 15 2024, 14:43:55 UTC
Про микротрубочки и квантовые эффекты в нейронах - это Пенроуз выдумал. Я даже писал об этом в одной из своих статей. Пока это только гипотеза, а точно никто не знает, задействованы ли квантовые эффекты в работе сознания.

Ну, если квантовые компьютеры настолько удобны для обучения нейросетей, то пусть используются. Правда, что-то я пока не наблюдаю особого ажиотажа в их применении для ИИ.

Reply


valeriy_ovo October 3 2024, 16:29:46 UTC

Владимир, как у Вас дела, мы уже беспокоимся очень долго ничего не пишите.

Reply

krre31 October 3 2024, 16:47:38 UTC
Ничего интересного не происходит. А поскольку ничего интересного нет, то и писать не о чем :))

Reply

valeriy_ovo October 3 2024, 19:10:06 UTC

Ну и слава Богу.

Reply

tri_el October 5 2024, 11:17:06 UTC

а Вы не знаете к чему снится название населенного пункта? Не в осознанном, в обыкновенном сне? Я во сне была в городе и спрашивала его название. Мне отвечали, но казалось, что это какое-то корявое слово и я переспрашивала. Но повторяли так же. Проснувшись загуглила это слово, и это оказался город в Германии...раньше не слышала о таком.живу в России

Reply


Leave a comment

Up