Нейросеть

А Вы так же думаете о предстоящих выходных как ента лягуха?

Вступление.

Всем доброго времени суток, с вами на связи Lis-ST, и сегодня мы с вами более подробно ознакомимся с нейросетями, которые чаще всего и называют ИИ, а именно с языковыми моделями. Начнём от простого, к сложному.

Восприятие языковых нейронок.

Модели не понимают буквы и слова как люди. Их родной язык — числа. Решить эту проблему довольно просто, ведь правда? Просто присваиваем каждой букве и знаку число - проблема решена! Но практика показала обратное, на обработку текста в таком формате требовалось очень много вычислительных мощностей и времени, а при увеличении длины текста требования росли в квадратичной зависимости. Причина банальна, внутри скрытого слоя каждый символ должен "взаимодействовать" с каждым, и это не единственная проблема. 

Первый шаг в решении данной проблемы, разбить текст на части - "токены". А раз уж решили прибегнуть к такому способу и так как нейросеть всё-равно работает с числами, почему бы их не сделать из наиболее часто встречающихся частей текста:

• Привет = 1 токен (целое слово)
• , как = 1 токен (часто идущие вместе символы)
• дела = 1 токен
• ? = 1 токен
• Редкое слово антидизель может разбиться на [анти, дизель].
• А - тоже токен.

С одно стороны, когда у нас были символы, наш словарь состоял из 256 значений, а токенов в той же GPT более 50000... Какая-то оптимизация наоборот, скажете вы и будете не правы. Всё дело в том, что если токеновая модель обрабатывает последовательность из 1000 токенов за условные 10 секунд, то символьной модели для обработки того же текста потребуется уже минимум 160 секунд, неплохая такая разница?

Вкратце затронем эмбеддинги - так называемый вектор. Зачем нам какой-то вектор, ведь токены у нас, числа им присвоены? Но нужно же как-то определять, в каком порядке токены размещены в тексте. Не забываем о контексте за который отвечает механизм внимания (Self-Attention), работающий так-же в скрытом слое, всё также путём присвоения дополнительных значений токенам.

Генерация - не сердце, но суть нейросетей.

Языковая модель — это очень умный писатель, он никогда не видит весь текст сразу, а пишет по кусочкам (токенам). И каждый раз, когда нужно выбрать следующий кусочек, в его голове происходит невидимое "голосование".

После того как модель прочитала всё, что вы написали, она составляет внутренний рейтинг всех возможных продолжений. У неё в голове есть огромная доска рейтинга на 50 000 мест (по числу токенов). У каждого варианта — своя оценка. Эти оценки — не про "правильность", а про типичность. Модель спрашивает себя: "Что в моей обучающей библиотеке чаще всего шло после такого начала?"

Пример: вы написали "Сегодня хорошая...". В голове модели:

• место №1: "погода" - (очень высокий балл)
• место №2: "." (точка) - средний балл
• место №3: "для" - небольшой балл
• место №1000: "крокодил" - почти ноль

Модель никогда не уверена на 100%, у неё есть только веса предпочтений.

Что происходит с этими весами дальше? Два Варианта:

Вариант №1: Точность.

Модель всегда берёт самый верхний вариант из рейтинга. Увидела "погода" - напечатала "погода". Потом снова смотрит рейтинг для "Сегодня хорошая погода", опять берёт самый верхний... В итоге получается очень предсказуемый, сухой, бездумно-правильный текст. Как говорят: "модель включила режим калькулятора". Плюс: не ошибается, минус: нет творчества, повторяет штампы.

Такой режим используется, когда нужен точный факт, код или перевод. Но общаться с таким собеседником скучно и бесполезно, но главное, абсолютно бесперспективно, если вы сунетесь к нейронке с тем, чему она не обучена (запомните главный принцип, касательно "проблем", если решения вашей проблемы нет в интернете, вероятность того, что поможет нейросеть, стремится к нулю, даже при варианте №2).

Вариант №2: Обычный человек.

Модель смотрит на рейтинг и подбрасывает волшебный кубик, где грани взвешены по весам. Вариант с весом 80% занимает 80% граней кубика, вариант с 15% - 15% граней и т.д.. Так она иногда может выбрать и "погоду", и неожиданно «.», и даже очень редко "крокодила", если кубик так выпадет.

Именно за счёт случайности текст становится живым, разнообразным, иногда остроумным. Но изредка - странным или глупым. Это плата за "человечность" и творчество.

Температура.

Температура - это ручка управления "креативностью" нейросети.

Холодная температура (низкая, например 0.2).

Модель как бы увеличивает контраст между первым местом и всеми остальными. Первое место становится гигантским, а все остальные - крошечными. Кубик почти всегда падает на топ-1 результат. Текст становится сухим, однообразным, как диктор новостей, читающий по бумажке.

Лучше всего для: фактов, инструкций, кода, перевода.

Комнатная температура (1.0 - стандарт).

Это естественное состояние модели, то, чему её обучили. Разница между первым и вторым местом естественная. Кубик отражает реальные статистические веса. Текст получается похожим на обычную человеческую речь - с предсказуемыми, но иногда слегка неожиданными поворотами.

Лучше всего для: обычного чата, деловых писем, новостей.

Горячая температура (высокая, например 1.5).

Модель сглаживает оценки: первое место уже ненамного выше второго, а сотый вариант получает заметный шанс. Кубик становится "расслабленным" - он может выбросить редкое слово, необычную конструкцию, даже неуклюжий, но свежий оборот. Текст получается творческим, иногда странным, иногда гениальным, иногда бредовым.

Лучше всего для: стихов, шуток, креативных идей.

Кипящая температура (очень высокая, например 2.5+).

Все варианты становятся почти равноправными. "Погода" и "крокодил" получают почти одинаковые шансы. Кубик выпадает практически случайно. Текст превращается в бессмысленный словесный шум - связные слова, но нелепые сочетания ("Сегодня хорошая крокодил на завтрак"). Полезно разве что для демонстрации того, как модель ломается.

Есть ещё более умные настройки, дополняющие температуру, но статья и так уже не маленькая, а это плохо.

Манипуляции нейросетью.

Чтобы задать нейросети нужный "настрой" или стиль, используют два главных инструмента: ручки температуры (о которых мы говорили) и волшебные слова в начале диалога (промпты).

1. Задаём "характер" словами.

Представьте, что вы нанимаете актёра. Вы не просто говорите "говори", а даёте вводную о роли:

"Ты - научный популяризатор, который объясняет сложные вещи на пальцах. Ты не используешь формулы и термины, если без них можно обойтись. Ты любишь метафоры, примеры из жизни и немного юмора. Твой стиль - как у хорошего учителя или ведущего научно-популярного шоу."

В GPT это называется system prompt (системное сообщение). В других моделях - просто первое сообщение, которое задаёт контекст.

Что ещё можно прописать в настройку:

• "отвечай кратко, не более трёх абзацев"
• "используй маркированные списки, но без markdown"
• "называй меня на "ты""
• "добавляй примеры из кулинарии/спорта/путешествий"

Это самый мощный способ изменить стиль, потому что модель начинает "вживаться" в роль.

Вот несколько самых интересных примеров того, на что способен системный промпт за пределами привычных сценариев:

Придумать "анти-совет" для вашей идеи (Адвокат Дьявола):

Нейронка по умолчанию старается быть вежливой и соглашаться. Но промпт может превратить её в беспристрастного критика, задача которого - найти слабые места в вашем бизнес-плане или проекте, чтобы вы могли его улучшить.

Подготовиться к сложному интервью:

Попросите нейросеть представить себя журналистом, который задаст вам каверзные вопросы. Это поможет вам заранее подготовиться к разговору с реальным экспертом.

Писать стихи в стиле числа "π":

В этом промпте каждое слово стихотворения должно строго соответствовать цифрам числа Пи (3,14,15…), где первое слово - из трёх букв, второе - из одной, третье - из четырёх и т.д.

Заключение? Итог? Выводы?

А теперь можно вернуться к вопросу, существует ли ИИ на сегодняшний день? Но чтоб разобраться в данном вопросе, нужно в первую очередь понять, что такое ИИ.

Исходя из словосочетания, ИИ, это интеллект, но искусственный, а интеллект - это качество психики, состоящее из способности осознавать новые ситуации, способности к обучению и запоминанию на основе опыта, пониманию и применению абстрактных концепций, и использованию своих знаний для управления средой обитания человека.

Да, это сухое, весьма размытое определение, которое не даёт чёткого представления о том, что-же это такое. Если же посмотреть на то, с помощью чего он реализуется, всё становится на свои места: способности познавать, обучаться, мыслить логически, систематизировать информацию путём её анализа, определять её применимость, находить в ней связи, закономерности и отличия, ассоциировать её с подобной информацией, оценивать её достоверность, актуальность и многое другое...

И опять вернёмся непосредственно к вопросу, являются ли нейросети - искусственным интеллектом? На все 100% нет, и даже близко ничего общего с ним не имеют. По своей сути нейронки - поисковик, работающий на глюках.

П.С.:

У Лисёнка голова бобо. Тут хотел написать в рифму к первому предложению, но видимо ещё не совсем.

Всем спасибо за внимание, с вами был Lis - Silver Tail. Ссылка на первый пост об основах нейросетей ниже.(блин, это же ещё всё вычитывать...(здесь был смайлик))

Нейросети: основы, логика и принципы работы для чайников и лис. Часть 1.

Глядишь, я так и в шлакоблоке всё-таки окажусь...

Кстати "Бабки-Ёжки" любимая мультяшная песенка моего отца...

Ну и на последок:

Да, переработки желают лучшего, но что есть...

Вопрос: Что объединяет всех этих девушек на фото?

Правильно они не настоящие.

Привет, друзья!

Давайте честно: многие из вас думали о том, как было бы здорово завести видеоблог. Но что-то всегда останавливало. Кто-то стесняется камеры, кто-то не хочет показывать лицо, кто-то считает что это несерьезно, а у кого-то просто нет времени на свет, звук и монтаж.

Раньше это были серьезные препятствия. Но в 2024 году нейросети стерли эти границы. Сегодня я расскажу, как можно стать видеоблогером, используя только компьютер и... цифрового аватара.

Кто такой цифровой аватар?

Это не просто картинка. Это ваш виртуальный двойник, который выглядит как человек (или как любое другое существо), говорит вашим голосом и ведет себя естественно. Вы остаетесь в тени, а на экране «работает» ваш персонаж.

Но как заставить картинку двигаться и жить? Тут в игру вступают две волшебные технологии. Давайте разберем их без сложных терминов.

Два кита видео-нейросетей

1. i2v (Image-to-Video) 🖼️➡️🎥

Простыми словами: «Оживление фото». Как это работает: Вы берете статичную картинку (портрет вашего аватара) и загружаете в нейросеть. Алгоритм понимает, где глаза, рот, волосы, и генерирует видео, где эти части двигаются. Зачем это вам: Чтобы ваш блогер не выглядел как приклеенная фотография. Он сможет моргать, улыбаться и поворачивать голову.

2. Motion Control (Контроль движения) 🕺

Простыми словами: «Цифровая кукла». Как это работает: Вы задаете схему движений. Например, загружаете видео, где человек машет рукой, и говорите нейросети: «Сделай так же, но моим аватаром». Или вы вручную расставляете точки на скелете персонажа, управляя его позой. Зачем это вам: Чтобы добавить эмоций. Если вы рассказываете захватывающую историю, аватар может активно жестикулировать. Это делает видео живым и удерживает внимание зрителя.

Как запустить канал за выходные?

Вам не нужна студия. Вот простой рецепт:

1. Придумайте персонажа. Кто вы? Футуристичный киборг? Мудрый совенок? Или просто стильный незнакомец? Сгенерируйте его портрет в любой арт-нейросети.
2. Запишите голос. Это ваша душа в блоге. Можно записать себя и обработать шум, а можно создать уникальный голос через ИИ.
3. Соберите видео.Используйте i2v, чтобы синхронизировать губы аватара с вашим аудио.Используйте Motion Control, чтобы добавить жесты (например, кивки головой или движения руками в кадре).
4. Используйте i2v, чтобы синхронизировать губы аватара с вашим аудио.
5. Используйте Motion Control, чтобы добавить жесты (например, кивки головой или движения руками в кадре).
6. Смонтируйте. Добавьте музыку, субтитры и выкладывайте!

Почему это игра меняет правила?

• Полная анонимность. Вы можете быть суперзвездой интернета, но оставаться неизвестным в реальной жизни.
• Бесконечный ресурс. Аватар не устает, не болеет и не требует перерывов на обед.
• Свобода творчества. Хотите снять выпуск на Марсе? Просто поменяйте фон. Хотите превратиться в дракона? Легко.

Главный секрет успеха

Технологии — это круто, но контент всё еще правит балом. Зритель подпишется не потому, что видео сделано нейросетью, а потому что ему интересно то, что вы говорите. Цифровой аватар — это лишь оболочка. Наполняйте её смыслом, юмором и пользой.

Эра видеоблогинга стала доступной для каждого. Нейросети взяли на себя сложную техническую работу, освободив вас для самого главного — творчества.

Попробуйте создать своего цифрового двойника уже сегодня. Кто знает, возможно, именно ваш аватар станет следующим миллионником!

А вэтом telegram-канале "Creators" можете посмотреть подробную инструкцию как в наше время можно заработать на виртуальных инфлюенсерах.

Сегодня была обычная текучка после долгих выходных. Вылезла проблема - начали решать...

Но у нас планы по модернизации, которые откладываем уже вторую неделю (долго локально тестировали нашую будущую "модернизацию"), так что

По традиции в СССР суббота была связана с уборкой. Да, это не шаббат в Израиле - никакого покоя или отдыха. Но хлопоты направлены на улучшение среды, в которой живём (уборка дворовой площади всем скопом, уборка квартиры, ну и в армейке - ПХД). Я, к примеру уже выкинул 2 пакета хлама и собрал пакет хлама электронного  отнести на работу.

Ну и по вомбатной традиции - нероночка:

Есть мнение, что нынешние пользователи интернета начинают уставать от «творчества» нейросетей. Людям, дескать, начинают надоедать красиво и «качественно» сделанные, математически правильные тексты, рисунки, музыка и видеоролики (да, нейросети теперь могут создавать даже видео), при всех своих «достоинствах» лишённые души и творческого начала.

Действительно, чисто технически любой нейросетевой продукт - это база данных, механическое соединение того, что уже было кем-то когда-то создано. Созидать как человек, то есть с помощью творчества реагировать на окружающую действительность, искусственный интеллект по-прежнему не может. И авторы упомянутого мнения считают, что пользователи это прекрасно чувствуют. А значит, в будущем мы будем наблюдать сильное повышение спроса на продукцию, созданную «руками» - то есть без участия нейросетей. Такой контент будет размещаться на платных сервисах, так что за «живое» творчество в большинстве случаев придётся платить.

Однако глядя на то, как «интеллектуальное большинство» потребляет, в частности, музыку и видео, я лично в этом сомневаюсь. Большинство людей включает музыку, так сказать, фоном, выбирая при этом простые и непритязательные композиции, и им абсолютно всё равно, кто их создаёт - Вася, Петя или нейросеть. То же касается всего остального контента.

Так что платные сервисы с «живым» творчеством, возможно, и появятся, но популярность их будет не особо высока: это станет, наверное, элитарным продуктом. А значит, произойдёт своего рода разделение труда: ИИ будет создавать бесконечное множество бесплатного (или очень дешёвого) контента для обычного, «среднего» потребителя, а талантливые художники, музыканты и кинорежиссёры - высококачественные произведения для искушённой публики. Только большая часть человечества рискует потерять доступ к таким произведениям - финансы не позволят. 

А вот моя статья на Дзене, которую я написал ровно шесть лет назад и которая тоже посвящена "засилью" высоких технологий. Интересно, насколько она актуальна в наше время? [если не отображается ссылка - нужно отключить AdBlock]:

• Когда исчезнут копирайтеры? 

Разработчикам отечественного голосового робота для управляющих компаний в сфере ЖКХ пришлось переобучать нейросеть после того, как она начала использовать нецензурную лексику. Об этом сообщил ТАСС на Сибирском строительном форуме президент Национального объединения организаций в сфере технологий информационного моделирования (НОТИМ) Михаил Викторов.

"Приведу забавный случай, это нейросеть, она учится, и буквально уже в первый месяц разработчики отметили такую коллизию, что нейросеть научилась мату. Но, как это говорится, с кем поведешься, от того и наберешься. Поэтому эту коллизию, конечно, пришлось устранять. Но тем менее это показатели активной работы с нашими гражданами", - сказал он.

Викторов отметил, что внедрение голосовых роботов позволяет существенно сократить штат кол‑центров управляющих компаний — в пять‑шесть раз. По его оценке, вместо 20 сотрудников может работать два‑три специалиста, поскольку робот способен обрабатывать 80–90% обращений.

Согласно приведённой статистике, около 80% пользователей остаются удовлетворены ответами голосового помощника. «Конечно, бывают нетипичные случаи, когда люди разгневаны, аварийные, когда уже надо переходить на живого оператора, который принимает экстренные решения», — добавил он.

Новость пронеслась по СМИ и вроде как не "Панорама"!

https://tass.ru/obschestvo/26425379

От себя предположу, что скорее всего люди матерились, пытаясь вызвать живого человека, когда робот не мог решить их проблему.

Солнце клонилось к закату, окрашивая тихую гладь Озера Утопленников в багровые тона. Трое мальчишек, Димка, Антон и маленький Борька, не послушались предостережений стариков и пробрались к озеру, мечтая о прохладе в знойный летний день.

Димка, самый старший и смелый, первым разделся и прыгнул в воду. Антон последовал за ним, а Борька, робко стоя на берегу, раздеваться не решался. Вода была необычайно холодной, но манила своей свежестью. Ребята плескались и кричали, позабыв о страшных легендах, которыми окутано это место.

Вдруг Димка закричал. Его ноги словно кто-то схватил под водой. Он барахтался, пытаясь вырваться, но хватка становилась все сильнее. Из мутной глубины показались бледные, склизкие руки, тянущиеся к нему. Антон, испугавшись, поплыл к берегу, крича от ужаса.

Борька, замерев от страха, наблюдал, как Димка уходит под воду, его крики затихают, а руки исчезают в темной бездне. Антон выбрался на берег и, не оглядываясь, побежал прочь. Борька, дрожа всем телом, последовал за ним.

С тех пор никто из них не осмеливался приближаться к Озеру Утопленников. Они всегда помнили крики Димки и бледные руки, тянущиеся из воды. А озеро, словно насытившись, вновь успокаивалось, ожидая новых жертв, затерявшихся в сумерках.

Продолжаю оживлять старые творения нейросетью Grok.

Получился вот такой триллер о крокодилах.

Продолжаю оживлять старые творения нейросетью Grok.

Вдохнула жизнь в сову.