У нейросетей, которые пишут тексты есть существенный баг. Совершенно непонятна достоверность информации. Они правдоподобно ответят на вопрос, даже если ответа у них нет. Спросишь про периметр (или даже про площадь) пятиугольного треугольника — ответит

Если же попросить привести пруф на какой-то факт, может привести реальный, а может выдать правдоподобно выглядящую но никуда не ведущую ссылка, или вполне достоверно смотрящуюся отсылку на несуществующую научную статью в журнале.

Но. Многие этого еще не поняли, но это хорошая новость. Потому что ставит перед разработчиками задачу автоматической верификации. Что-то подобное было описано у Нила Стивенсона в «Анафеме». Чтобы нейросеть могла не просто рассказывать о чем-то, а приводить релевантные пруфы, и выдавать разные точки зрения если их несколько с оценкой их достоверности (как в хороших статьях Википедии)

А эти системы верефикации могут оказатся сами по себе даже более полезными, чем сами текстогенераторы. Так что их можно будет использовать самих по себе для проверки любой информации.

#нейросети

https://blog.sirano.info/2022/12/12071/

Я понимаю, что разбираться в новых соцсетях сложно. Тем более, что федиверс — это не одна сеть, а целая вселенная соцсетей. Поэтому я напишу как привычнее всего использовать эти сети с конкретными рекомендациями, чтобы снизить порог вхождения для других. Рекомендации носят, разумеется, рекомедательный характер 😀 Напомню, что в федиверсе нет хозяина, который решает, что вам смотреть. Посты в хронологическом порядке, Отсутствие глобальной цензуры. Локально хозяин сервера может устанавливать любые свои правила, но если вам они не нравятся есть возможность пренести весь контент на другой сервер вместе с записями и подписками на друзей. Механизмы для этого встроены в систему. Или поставить свой сервер. Как я говорил, федиверс, это не конкретная сеть, а протокол. И на самом деле, это не один протокол, а несколько 😀 В целом, выбор той или иной сети в рамках обного протокола не особо важен. В своей ленте вы будете читать и комментировать и сообщения из аналога твиттера (Mastodon), и картинки из аналога инстаграмма (Pixelfed), и видео из аналога ютуба (PeerTube). И не только соцсети 😀

Все перечисленные в предыдущем абзаце соцсети работают по протоколу ActivityPub. Он наиболее развит, и я рекомендую пользоваться именно им.

Наиболее полезные реализации ActivityPub:

Pixelfed, федеративный сервис для обмена фотографиями. Тот же фукционал, что в инсте. Картинки, подписи, фильтрв для фотографий… У меня там (на одном из серверов) есть канал с нейрокартинками https://metapixl.com/Snark

PeerTube, федеративный сервис для стриминга видео. С видео сложнее, чем с фото. Поскольку, как правило, это большие файлы, мало кто хочет разворачивать у себя узел, в котором будет постить видео кто угодно. Так что Ютуб особо им не заменишь, увы 🙁

Mastodon, Pleroma — соцсети типа твиттера. С сопутствующими твиттеру ограничениями. Например, длина записи в большинстве Mastodon серверов — 500 знаков. И максимум 4 фото в посте. Но есть и исключения — например сервер https://lor.sh — там могут быть посты длинной 100500 символов 😀

Ну, и самое близкое к вк и fb (но даже с большими возможностями) — это Friendica.

Именно на ней я в итоге и остановился. Из серверов я выбрал Децинтрелизованную сеть города Рудный https://rud.life/Несколько странный выбор, это достаточно небольшая сеть, но там много русскоязычных подписчиков, поэтому мне там проше по локальной сети искать русскоязычную публику. Но, в целом, это не столь важно — подписатся можно на любого человека из сетей с протоколом ActivityPub. Так, моя сеть и аккаунт во Френдике, а приложение, с которого я читаю, это вообще приложение для Мастадона. Я там — https://rud.life/profile/snark (я указываю линк на страницу, но в целом идентификация там как в почте — ник, собака, и имя сервера. То есть snark@rud.life)

Используя адрес (как один, так и другой) можно добавить любого участника любой мз сетей во френды, читать его, комментировать. Достаточно любой из этих адресов поместить в поле поиска, поиск найдет юзера и появится кнопка добавить. Друзей можно разбивать на группы, и читать ленту какой-то конкретной группы.

Так же в ленту можно добавить для чтения (для коментирования ссылка перебросит на оригинальный сайт) например, посты из ЖЖ! Дело в том, что в ленту френдики можно добавлять RSS. Этот протакол есть во многих блогах. Например, Naked Science. Да и вообще, практически любой новостной сайт выдает RSS. Достаточно вставить его в поле поиска на фпендике, и RSS откроется как обычный юзер, которого можно добавить к себе в ленту.

Так вот, ЖЖ — тоже выдает RSS. Достаточно к адресу конкретного жж юзера добавить /data/rss и получившийся адрес вставить туда же, в поле поиска френдики, и вы сможете читать френда из ЖЖ прямо из своей ленты френдики. Даже с юзерпиком 😀

А, скажем, блог на вордпресс не только имеет RSS, но и с помощью плагина вообще отдает свой контент в формате ActivityPub. Так что на мой блог, который я веду еще с дофейсбучных времен, вы тоже можете подписаться через любую из сетей федиверса с помощью адреса Sirano@blog.sirano.info

В самих постах на френдике можно использовать BBCode — то есть использовать всякие подчеркивания, зачеркивани, болды, вставлять картинки в текст и все такое.

Кстати, в федиверсе обитают Нил Гейман neilhimself@mastodon.social и Стивен Фрай stephenfry@mastodonapp.uk. И также есть трансляции разных аккаунтов твиттера, например eschulmann@mastodon.mlДа, с твиттером френдика вообще хорошо комуницирует, связать их между собой.

https://blog.sirano.info/2022/12/kak-polyubit-fedivers/

Когда появились неросети, рисующие картинки, я подумал: «Как здорово! Это обязательно надо использовать!» О дальнейшем вы догадываетесь. Оказалось, что нейросеть классно рисует «что-нибудь».
Результат, выданный сетью Midjourney на запрос «Что-нибудь в стиле Ван-Гога»
Но заставить ее нарисовать что-то конкретное — задача даже более творческая, чем у обычного художника (я определяю творчество как решение задач, не имеющих алгоритма решения). И все-таки мне удалось научиться применять нейросети на практике, причем в разных областях. В этой статье я расскажу, как с помощью нейросетей создал вполне материальные, ощутимые пальцами, украшения.

Но начинается эта история с моих попыток использования нейросетей в графике.

Довелось нам делать мэппинг для театра. Это была видеопроекция на стену в фойе театра, эдакая своеобразная подвижная афиша. Спектакль рассказывал историю Стивенсона про Остров Сокровищ, и для ролика мне нужен был Веселый Роджер. В принципе, нарисовать его не сложно, или можно купить на стоке. Но я подумал, а не попробовать ли для решения задачи новые технологии. Зашел я в Midjourney и говорю. Дай мне, дескать, череп в треуголке. «Skull in a cocked hat». И что бы вы думали? ИИ мне выдает гламурный такой череп в кокетливой шляпке. Видимо он так понял «cocked hat».
Череп в кокетливой шляпке. Результат генерации нейросети Midjourney
Я уточнил, что череп мужской, и мне нарисовали гламурный мужской череп в кокетливой шляпке :

Мужской череп в кокетливой шляпке

Подходящий череп я в итоге сгенерил, треуголку пририсовал руками («треугольная шляпа» — кстати, релевантно выдает реуголку, но наступает момент, когда время поджимет, и быстрее просто нарисовать).

Это была присказка. Теперь начинается сама история.

Смотрю я на получившмеся черепа, и думаю. А ведь выглядит как украшение. И решил сделать из этого черепа кулон. Ну или серьги. Я давно занимаюсь изготовление таких вещей.

Увы, нейросети пока не умеют 3D (точнее, уже подбираются, но результаты, пока довольно невзрачные). Так что пришлось придумывать, как из плоской картинки сделать 3D модель.

К счастью, одним из моих многочисленных занятий, является 3D-фотография, и я давно уже умею создавать из плоских картинок их карты глубины.

Во-первых, надо сгенерить подходящее изображение. Его сразу нужно делать черно-белым.

Сложности начинаются с этого места. Работа с нейросетью, это как работа с живым гениальным но витающем в своих фантазиях художником. Поэтому, изображение создается в несколько этапов. Сначала я делаю картинку в Midjourney, затем отдельные часть меняю через inpainting Stable Diffusion, и в итоге дорисовываю детали в фотошопе.



Как нарисовать сову. 1. Рисунок созданный в Midjourney, 2,3. изменение отдельной области через inpainting Stable Diffusion, 4. Дорисовка в фотошопе

Далее нам необходимо получить карту глубины. В идеале было бы создавать карту глубины сразу, но на слова «depth map» нейросеть не генерирует ничего подходящего. Гораздо более похожий на карту глубины результат (но все равно недостаточно удовлетворительный) получается по словам «ambient occlusion». Но и этого недостаточно.Когда видишь черно-белый рисунок, очень хочется его прямо сходу использовать как карту глубины. Но, увы, он не обладает такими свойствами. Так, на картинке слева, видно, что правая сторона солнца и правая сторона правой девушки в тени, а на объемной модели это будет выглядеть так, будто часть лиц оказывается дальше затылка. Это нем совсем не подходит.



Изображение, созданное Midjourney и его карта глубины, созданная с помощью MiDaS

И тут нам на помощь приходит другая нейросеть, с которой я был знаком еще до появления рисующих нейросетей. Эта сеть называется MiDaS. Она по готовым изображениям создает карты глубин. Более того, для Stable Diffusion существует скрипт, которые создает карту глубины сразу же после генерации изображения. А на днях вышла Stable Diffusion 2.0, в которой карта глубины используется отдельным слоем при генерации изображений!

Увы, такая карта глубины недостаточно детализирована. Ее хватает для создания стереофотографий, но совсем не хватает для создания барельефа. Поэтому приходится колдовать с картой глубины, самим изображением, и дорисовывать что-то вручную, чтобы получить удовлетворяющий тебя самого результат. Помните? Творчество — это решение задач не имеющих алгоритмов решения.

После получения карты глудины, дальнейшее — дело техники. По этой карте можно создать объемную модель или в Artcam, или в блендере, или даже в некоторых слайсерах. А дальше, печать на фотополимерном принтере, ручная раскраска и вуаля:

Тот самый череп в шляпке

Украшения созданные с помощью нейросети

Вот так причудливые фантазии нейросети обретают плоть, и начинают жить в материальном мире

https://blog.sirano.info/2022/12/materializaciya-chuvstvennyx-idej-ili-kak-ya-ispolzoval-nejroseti-dlya-sozdaniya-ukrashenij/

Занятно, но вордпресс с помощью плагина превращается в сервер ActivityPub

И этот пост тому пример 😀



https://blog.sirano.info/2022/11/vordpress/