Поиск по этому блогу

Постоянные читатели

среда, марта 26, 2025

 Сел было писать очередное сообщение, даже тему придумал. Но, начавши писать, понял, что писать мне не хочется. Устал. Надеюсь, что это скоро пройдет. Может, даже завтра. Я писал когда-то в воспоминаниях о лете 66 года в Крыму, как устал в какой-то момент от невозможности остаться одному, и когда ребята отправились в Сердоликовую бухту, я остался в Планерском и переночевал там один в полынной степи. Уже утром, поднявшись, я помчался (если можно так выразиться о передвижении по прибрежным скалам) туда, в Сердоликовую бухту... 

А пока делаю перерыв и призываю тех, у кого есть желание что-то сказать, писать здесь, в блоге. Одни читатели уже воспользовались возможностью стать соавторами блога, и имеют могут писать здесь наравне со мной, с такими же,как я понимаю, правами. Тем, кто хотел бы присоединиться, достаточно написать мне в комментарии к любому сообщению (желательно к последнему, просто искать будет легче), и я обеспечу оформление.

До скорой (надеюсь) встречи.

воскресенье, марта 23, 2025

Сообразил задним умом, что лучше всего (если говорить о литературе) опасность ИИ для человека иллюстрирует рассказ Роберта Шекли "Страж-птица". Поскольку, думаю, не все читали этот рассказ, изложу вкратце его содержание. 


Чарли Гелсен менеджер в компании, где по новым технологиям создают железных страж-птиц, которые чувствуют «мозговые волны» от будущего убийцы и бьют его током. Ученые считают себя «спасителями человечества» от преступности. 

Гелсена беспокоит, что новые птицы – самообучающиеся. Это какой-то «механический бог» для людей – и это безнравственно. Инженер Макинтайр успокаивает его, что эти птицы не захотят «править миром».

Вначале все идет хорошо, число убийств в итоге сводится к нулю. Только вот иногда  птицы, чтобы не допустить убийства, убивают наиболее упорствующих в стремлении убивать киллеров, повышая величину поражающего электрического заряда. Потом птицы, совершенствуясь, расширили понятие "убийство". И чуть не убили тех, кто по закону хотел казнить преступника в тюрьме. Потом стали бить током врачей, которые собираются оперировать больного. Потом еще расширили - и под убийством стали понимать убийство всего живого. То есть животных и даже растений. Под угрозой оказались мясники, охотники, рыбаки, а потом и сельскохозяйственные работники в целом. Человечество в итоге оказалось перед угрозой голода - нельзя ни убивать животных, ни собирать урожай... К тому же понятие "убийство" птицы перенесли и на неодушевленные предметы - стало невозможно, к примеру, выключить двигатель автомобиля...
Государственный проект был закрыт, птиц хотели выключить… а они не дали себя «убить». И, чтобы избавиться от них, сконструировали "ястребов", машины-убийцы. 

Рассказ заканчивается так:

Высоко в небе Ястреб атаковал страж-птицу. Бронированная машина-убийца за несколько дней многому научилась. У нее было одно-единственное назначение: убивать, Сейчас оно было направлено против совершенно определенного вида живых существ, металлических, как и сам Ястреб.
Но только что Ястреб сделал открытие: есть еще и другие разновидности живых существ…
Их тоже следует убивать.

пятница, марта 21, 2025

 

Сегодня обнаружил статейку, которая хорошо иллюстрирует вчерашнюю тему.


Мужчина подал жалобу после того, как ChatGPT заявил, что он убил своих детей

Норвежец подал жалобу после того, как ChatGPT ложно сообщил ему, что он убил двух своих сыновей и был приговорен к 21 году тюрьмы.

Арве Ялмар Хольмен обратился в Норвежское управление по защите данных и потребовал оштрафовать разработчика чат-бота, компанию OpenAI.

Это последний пример так называемых "галлюцинаций", когда системы искусственного интеллекта (ИИ) изобретают информацию и представляют ее как факт.

Холмен утверждает, что эта конкретная галлюцинация наносит ему большой вред.

"Некоторые думают, что дыма без огня не бывает. Но тот факт, что кто-то может прочитать эти данные и поверить в их правдивость, пугает меня больше всего", — сказал он.


Писатели-фантасты плохо предсказывают технические достижения будущего. В 50-60-е годы ни один известный мне фантаст не предвидел в своих книгах появление интернета, сотовой связи и персонального компьютера. Рост возможностей ЭВМ (слово компьютер было тогда еще не в ходу в русском языке) представлялся исключительно как рост их физических размеров. Но вот по части социальных прогнозов многие фантасты были вполне прозорливы. В "1984" у Оруэлла, и в "Обитаемом острове" у Стругацких показано, к примеру, как техника будущего формирует у людей совершенно ложное впечатление об окружающей действительности. Есть и еще один забавный пример - "Королевство кривых зеркал" Губарева. Правда, автор, судя по другим его работам (в основном он разрабатывал в разных жанрах историю Павлика Морозова), видимо, искренне считал, что пишет о буржуазной действительности, но сегодня его книга воспинимается несколько по-другому.

А в любимой моей книге Роберта Шекли "Обмен разумов" нет технических средств, которые власть использует для обработки населения. Но показано, как человек после попадания в некие непонятные "Искаженные миры" теряет представление о реальности и воспринимает как должное все, что видит перед собой. Этот путь - через такие вот "искаженные миры" предстоит, видимо, пройти всему человечеству. Я надеюсь не дожить до таких времен. Но, может, на самом деле уже дожил? Герой Шекли-то уверен, что живет в привычном мире.

Вот как заканчивается повесть Шекли (любопытен кусочек про отсутствие в Искаженных Мирах устойчивых причинных связей; большинство людей живет в таких мирах уже сегодня, уж это точно):


И вот Марвин Флинн вернулся на Землю и в собственное тело.

Он приехал в родной Стэнхоуп и увидел, что там все по-прежнему. Городок, как раньше, географически находился милях в трехстах от Нью-Йорка, а в духовном и эмоциональном отношениях отстоял от него на целое столетие. Точь-в-точь как всегда, он изобиловал садами и пегими коровами на фоне зеленых холмистых пастбищ. Вековечны были усаженная вязами Мейн-стрит и одинокий ночной вопль реактивного лайнера.

Никто не спросил Марвина, где он пропадал. Даже лучший друг Билли Хейк решил, что Марвин вернулся из увеселительной поездки в какой-нибудь туристский рай — Шинкай или дождевой лес в нижнем течении Итури.

Поначалу несокрушимое постоянство городка угнетало Марвина не меньше, чем сюрпризы Обмена Разумов или чудовищные головоломки Искаженного Мира. Постоянство казалось Марвину экзотикой; он все ждал, что оно постепенно исчезнет.

Но такие места, как Стэнхоуп, не исчезают, а такие ребята, как Марвин, постепенно растрачивают увлеченность и высокие идеалы.

По ночам в одиночестве мансарды Марвину часто снилась Кэти. Ему все еще трудно было представить, что она чрезвычайный агент Межпланетной Службы Бдительности. А ведь был в ее повадках намек на властность, был в глазах блеск прокурорского фанатизма.

Он любил ее и знал, что всегда будет по ней тосковать, но тоска устраивала его больше, чем обладание.

И по правде сказать, ему уже приглянулась (точнее, заново приглянулась) Марша Бэкер, хорошенькая и скромная дочка Эдвина Марша Бэкера — крупнейшего в Стэнхоупе торговца недвижимостью.

Пусть Стэнхоуп не лучший мир из всех возможных, но это лучший мир из тех, что видел Марвин. Тут вещи не подкладывают тебе свинью, а ты не подкладываешь свинью вещам. В Стэнхоупе метафорическая деформация немыслима; корова уж точно корова, и называть ее как-нибудь иначе — недопустимая поэтическая вольность.

Итак, бесспорно: в гостях хорошо, а дома лучше; и Марвин поставил перед собой задачу наслаждаться привычным, что, как утверждают сентиментальные мудрецы, есть вершина человеческой мудрости.

Жизнь его омрачали лишь два сомнения. Первым и главным был вопрос: каким образом Марвин вернулся на Землю из Искаженного Мира?

Он всесторонне продумал этот вопрос, куда более страшный, чем может показаться с первого взгляда. Марвин понял, что в Искаженном Мире нет ничего невозможного и даже ничего невероятного. Есть в Искаженном Мире причинная связь, но есть и отсутствие причинной связи. Ничто там не обязательно, ничто не необходимо.

Поэтому вполне допустимо, что Искаженный Мир отбросил Марвина назад, на Землю, продемонстрировав свою власть над ним тем, что отказался от этой власти.

По-видимому, именно так все и произошло. Но был ведь и другой, менее приятный, вариант.

Теорема Дургэма формулирует его следующим образом: «Среди вероятностных миров, порождаемых Искаженным Миром, один в точности похож на наш мир; другой похож на наш мир во всем, кроме одной-единственной частности, третий похож на наш мир во всем, кроме двух частностей, и так далее».

Это означало, что Марвин, возможно, все еще пребывает в Искаженном Мире, и Земля, воспринимаемая его сознанием, — всего лишь эфемерная эманация, мимолетное мгновение порядка в стихийном хаосе, — обречена с минуты на минуту вновь раствориться в стихийной бессмыслице Искаженного Мира.

Отчасти это было неважно, ибо ничто не вечно под луной, кроме наших иллюзий. Но никто не хочет, чтобы его иллюзии оказались под угрозой, и потому Марвин старался выяснить, на каком он свете. На Земле он или на ее дубле? Нет ли здесь приметной детали, не соответствующей той Земле, где он родился? А может быть, таких деталей несколько? Марвин искал их во имя своего душевного покоя. Он обошел Стэнхоуп и его окрестности, осмотрел, исследовал и проверил флору и фауну.

Все оказалось на своих местах. Жизнь шла заведенным чередом; отец пас крысиные стада, мать, как всегда, безмятежно несла яйца.

Он отправился на север, в Бостон и Нью-Йорк, потом на юг, в необозримый край Филадельфия — Лос-Анджелес. Казалось, все в порядке.

Он подумывал о том, чтобы пересечь страну с запада на восток под парусами по великой реке Делавэр и продолжить свои изыскания в больших городах Калифорнии — Скенектади, Милуоки и Шанхае.

Однако передумал, сообразив, что бессмысленно провести жизнь в попытках выяснить, есть ли у него жизнь, которую можно как-то провести.

Кроме того, можно было предположить, что даже если Земля изменилась, то изменились также его органы чувств и память, так что все равно ничего не выяснишь.

Он лежал под привычным зеленым небом Стэнхоупа и обдумывал это предположение. Оно казалось маловероятным. Разве дубы-гиганты не перекочевывали по-прежнему каждый год на юг? Разве исполинское красное солнце не плыло по небу в сопровождении темного спутника? Разве у тройных лун не появлялись каждый месяц новые кометы в новолуние?

Марвина успокоили эти привычные зрелища. Все казалось таким же, как всегда. И потому охотно и благосклонно Марвин принял свой мир за чистую монету, женился на Марше Бэкер и жил с нею долго и счастливо.


Так давайте и мы будем жить долго и счастливо. А о том, в каком мире мы находимся, лучше не думать. Для душевного спокойствия. 

   

четверг, марта 20, 2025

 

Вчера на одном из израильских русскоязычных сайтов прочитал статью, которая мне показалась очень интересной. Воспроизвожу ее здесь:

ИИ дает ошибочные ответы в 60% случаев – ученые


Ученые протестировали восемь различных моделей ИИ, что выяснить, какие из них ошибаются чаще всего.Новое исследование, опубликованное в "Columbia Journalism Review", выявило серьезные проблемы с точностью ответов, предоставляемых современными системами 
искусственного интеллекта. Ученые протестировали восемь различных моделей ИИ, 
включая ChatGPT от OpenAI и Gemini от Google, и выяснили, что в среднем они дают 
неверные ответы более чем в 60% случаев.
Особенно тревожные результаты продемонстрировала модель Grok 3, разработанная 
компанией Илона Маска – ее уровень ошибок достиг 94%, что делает ее одной из 
наименее достоверных среди протестированных. Даже лучшая по точности модель, 
Perplexity AI, все равно давала неверные ответы в 37% случаев.
Одна из ключевых проблем ИИ-моделей – избыточная уверенность в неправильных 
ответах. Вместо того чтобы признавать свои ограничения, нейросети часто предоставляют 
сфабрикованные или умозрительные данные, которые могут вводить пользователей в 
заблуждение.
Еще один серьезный недостаток – неспособность ИИ корректно ссылаться на 
первоисточники. ChatGPT, например, в 40% случаев ссылался на неправильные статьи, а в 21% случаев вообще не указывал источник. Это не только мешает проверке фактов, но и создает угрозу для авторских прав и интернет-медиа, теряющих веб-трафик.
По мнению экспертов, эти результаты свидетельствуют о необходимости осторожного 
подхода к использованию искусственного интеллекта в критически важных сферах, где 
требуется высокая точность. Развитие технологий ИИ продолжается, однако на данный момент полагаться на нейросети как на безошибочные источники информации – крайне 
рискованная идея.



Насколько я понимаю, речь в первую очередь идет о ответах на "политические" вопросы. И почему-то это не удивляет. Я, конечно, не специалист по IT, но, как мне представляется, ИИ - это в конце концов компьютерная программа. А программы пишут люди. А у разных людей разные представления о том, "что есть истина". Не говоря уже о тех,кто сознательно стремится к тому, чтобы ввести людей в заблуждение. В этой связи меня ничуть не удивляет, что больше всего врет модель,созданная Маском - 94%. Это означает, что врет эта модель практически всегда. То есть даже в случае нейтральных вопросов, не связанных с политикой. 
Это означает, что, учитывая, куда движется наш мир, в обозримом будущем достоверной информации, которой можно доверять хотя бы в какой-то степени, не будет вообще. 
Хотя и сегодня, когда модели ИИ еще не определяют всю нашу жизнь, такой достоверной информации становится все меньше. Три дня назад я прочитал опять-таки на одном из израильских русскоязычных сайтов, что США потопили новейшее иранское разведывательное судно "Загрос". Удивился, решил проверить. Это сообщение висит на ряде сайтов, израильских, украинских, азербайджанском. Но нет ссылок ни на одно серьезное информационное агенство. Более того, на одном из сайтов, где занимаются фактчекингом я прочитал, что это сообщение - фейк. И меня это не удивило. Будь это правдой, об этом кричали бы во всем мире...
Но в связи с этим возникает вопрос: А можно ли верить информации, которая содержится в процитированной мною статье? Скажем, ИИ-модель Маска, которая врет всегда, это, по-моему, все-таки перебор. 
Хотя, во всяком случае, статья, на которую ссылался израильский сайт, существует. Ее можно найти здесь:  https://www.cjr.org/tow_center/we-compared-eight-ai-search-engines-theyre-all-bad-at-citing-news.php 




вторник, марта 18, 2025

 Сегодня утром проснулись - а у нас опять война. 

Не раз писал, что такое ощущение, будто весь мир сошел с ума. В том числе и Израиль. Какой-то полный дурдом у нас. Те, кто внимательно следят за ситуацией в Израиле, наверно, понимают о чем я. А тем, кто следит не очень внимательно, предлагаю поверить мне на слово.

Но один пример безумия (с моей точки зрения) приведу все-таки. 

По случаю возобновления военных действий сегодня отменено заседание суда, на котором наш премьер должен был давать показания. Он эти показания дает уже несколько месяцев в рамках нескольких дел, по которым его обвиняют в получении взяток в различной форме (борзые щенки места не имели). Прошлый раз заседания отменяли, когда премьер ездил в США на переговоры с Трампом.  

понедельник, марта 17, 2025

 Вчера был день рождения Сергея Юрского. Ему исполнилось бы 90 лет. А умер он в 83.

Я уже писал здесь когда-то что в достаточно раннем детстве представлял себе празднование 2000 года как какой-то невероятный праздник. И сожалел, что к этому времени я буду уже стариком и не смогу в полной мере ощутить этот праздник.

Хотя, конечно, даже и представить себе не мог, что 2000 год буду встречать в Израиле, вТверии, в доме на склоне горы над Тивериадским озером. В детские годы я и знать-то не знал ни про Тверию, ни про Тивериадское озеро. Да и про Израиль толком ничего не знал. Книжки о путешествиях читал, но среди них не было книг о путешествиях в Святую землю.  

Пушкин написал в 36 лет:

Уж десять лет ушло с тех пор — и много
Переменилось в жизни для меня,
И сам, покорный общему закону,
Переменился я 

А у меня не 10 лет прошло, а лет 70 как минимум, так что изменился я гораздо больше. Хотя для гениев время, наверно, совсем по-другому идет, но все же не в 7 раз быстрее, наверно.  

Изменилось, конечно же, и мое отношение к возрасту. Так что сегодня, в своем сегодняшнем возрасте, я с сожалением говорю, что Юрскому бы еще жить да жить, 83 года - это ведь не так уж много... А Юрский был атлет, читал, что все трюки в "Человеке ниоткуда" он выполнял сам...

Но это уж кому сколько от судьбы (или от генов?) положено.  

Вчера на торрентах выложили фильмы с Юрским. Их не так уж и много, а главных ролей в хороших фильмах совсем мало. Я скачал "Золотого теленка". Давно не пересматривал, а это, наверно, моя любимая большая киноработа Юрского. Наряду с ролью в "Человеке ниоткуда" (но это мы недавно смотрели). Так что сегодня будем смотреть Юрского-Бендера. 


суббота, марта 15, 2025

 Сегодня мне в ходе общения в интернете напомнили об американском фильме "Три мушкетера" 1939 года. Вспомнил, что про этот фильм слышал от отца - какая-то глупая музыкальная комедия, в которой главными героями были не три мушкетера, а слуги. И вспомнил, что читал одну збавную историю про этот фильм - уж не знаю, быль это или анекдот.

Дело в том, что музыку к этому фильму написал старший из братьев Покрассов - Самуил. Про него в Википедии написано "советский и американский композитор". Уехал он из СССР в 1924 году, успев до этого написать известную песню "Белая армия, черный барон". Его младшие братья, Дмитрий и Данииил отметились "Маршем Буденного", а также написали и другие известные в советское время песни. 

Сталину очень понравились эти американские "Три мушкетера". И как-то на приеме он спросил кого-то из братьев: "А правда ли, что автор музыки к "Трем мушкетерам" - ваш брат. Тот в ужасе ответил: "Да, но мы не поддерживаем с ним никаких связей". Сталин подумал и сказал: "Лучше бы вы двое уехали, а он тут остался". 

Эта история вполне укладывается в мифы о сталинском юморе. А также в представления о сталинском восприятии искусства.    

четверг, марта 13, 2025

 Сегодня на Эхе висит небольшой текст Шендеровича "Нормы важнее персоналий".
Шендерович, в частности, пишет:

"Мне отвратительны деятельность и убеждения палестинского активиста Махмуда Халиля, задержанного в минувшие выходные на территории Колумбийского университета, но его возможная депортация из США кажется мне ошибкой".

Никак не могу ответить самому себе на вопрос: Следует ли соблюдать гражданские права тех, кто
плюет на гражданские права, поддерживает терроризм, но охотно пытается пользоваться
гражданскими правами, когда пытается избежать ответственности за свои действия?
Вроде бы следует, иначе чем же мы отличаемся от них. Но, с другой стороны, они ведь на
голову сядут. Или просто будут убивать нас в ответ на нашу защиту их гражданских прав.
Это не пустые слова, 7 октября среди убитых Хамасом мирных граждан в Израиле были и
левые, которые выступали в поддержку "свободы Палестины"
Конечно, очень красиво звучит вольтеровское: "Я не согласен ни с одним словом, которое
вы говорите, но готов умереть за ваше право это говорить". Только я не уверен, что
Вольтер говорил бы то же самое о человеке, который прямо призывал бы убить его,
причем это были бы отнюдь не пустые угрозы, а поддержка тех, кто реально убивает.
Но в любом случае считаю, что следует анализировать каждую конкретную ситуацию, как
это сделал вчера Вахштайн из тель-авивского университета в статье о Халиле
("Действия Халиля потенциально попадают под два обвинения" - эта статья висела на Эхе вчера), а не исходить из неких абстрактных представлений о добре и зле,
как это делает Шендерович, не заботясь, как это с ним нередко бывает, о реальных
фактах.  

 Решил больше не писать о наших воздушных тревогах. Всего за несколько дней это стало рутиной. Так что теперь напишу, когда воздушные тревог...