Успехи и "успехи" ChatGPT
May. 27th, 2024 05:34 pm![[personal profile]](https://www.dreamwidth.org/img/silk/identity/user.png){kind=small}
probenУспехи есть, но вначале об "успехах".
Случился небольшой спор с vit-r о бес/полезности робота при поиске информации. Для поиска упомянутой там картины чат оказался бесполезным включая новую версию 4о, которая работает с изображениями. Собственно, как не сработал и поиск гуглом. Картина просто отсутствует в результатах поиска по имени художника, и приведенный фрагмент не с чем сравнить. То есть, изображение в интернете имеется, но в результатах "в лоб" не выдается. Интересно было поведение чата при попытках заставить его найти правильную картину. Он начал выдавать несуществующие названия картин, а затем ответы просто пошли по кругу. Что, указывает на отсутствие принципиальной разницы между версией 4о и предыдущими. Ключевая разница, видимо, в продвинутой системе имитации поведения человека.
Или другой пример - забыл я название одного фильма и спросил чат дав ключевое слово. В ответ получил правильное название, но неправильный год и выдуманный список актеров. И это несмотря на то, что первая же ссылка в гугле указывает на этот фильм. Что неудивительно, ибо чат выдает статистически наиболее подходящую фразу, а не информацию. Удивительно другое - неглупые специалисты-программисты это далеко не всегда понимают и считают, что бот скоро будет находить правильные ответы на программистские задачи, стоит только его подучить.
В целом, удобно то, что сразу вычленяется контекст, и мне не предлагают двадцать ссылок на статьи о лучших советских фильмах, но и окончательный выхлоп крайне лимитирован. Я бы сказал, что поиск через чат имеет смысл как ленивый поиск простых вещей. Чуть более сложные случаи эффекта не дают, да и ответы всегда требуют перепроверки.
Теперь об успехах.
Встала задача написать письмо в школу. Ситуация была непростая - скулборд почти три месяца морочит голову семье беженцев с ребенком аутистом не принимая их в школу и водя по кругу. На звонки и письма соцработника идут отписки и никакого продвижения. Тем временем, школьный год подходит к концу, а ребенок деградирует. Возникла идея эскалировать вопрос и для начала написать письмо от имени родителей. Проблема еще и в том, что родители почти не владеют английским, не говоря уже об отсутствии понимания местной культуры общения, которая, в частности, исключает скандалы. Начнете скандалить - вас просто исключат из числа адекватных и будут полностью игнорировать. Попросили написать меня, а я попросил чатжпт чтобы иметь какую-то рыбу. Попросил написать письмо в школу относительно такой-то и такой-то ситуации со ссылками на такие-то законы. И он мне выдал четыре абзаца, в которых мне пришлось заменить только одно слово и вписать имена. Письмо было написано настолько хорошо, словно писал его профессиональный юрист. Предельно вежливо и корректно, но и настолько жестко, что у впечатлительного адресата наверняка бы выступил пот при прочтении. Главный момент, который был ясен из контекста, что не исключены юридические последствия, хотя об этом и не упоминается.
Эффект превзошел любые ожидания. На следующий день из школы позвонили и через переводчика объяснили, что они не смогли ничего найти, но вот в сентябре открывается новый центр... Я предложил подождать пару дней и затем написать второе письмо уточняя, правильно ли мы поняли, что они не могут обеспечить ... и т.д. Но через два дня вариант внезапно нашелся, и родителей пригласили посмотреть подходит ли школа. Излишне говорить, что я бы и близко так написать не смог, и эффект не был бы столь оглушителен, если бы чиновники не прочли между строк серьезные проблемы с эскалацией вопроса вплоть до судебного иска.
И вот, в этом контексте, ChatGPT однозначно имеет успех и точно представляет угрозу армии юристов и особенно паралигал, которые кормятся заполнением форм и написанием формальных писем.
Случился небольшой спор с vit-r о бес/полезности робота при поиске информации. Для поиска упомянутой там картины чат оказался бесполезным включая новую версию 4о, которая работает с изображениями. Собственно, как не сработал и поиск гуглом. Картина просто отсутствует в результатах поиска по имени художника, и приведенный фрагмент не с чем сравнить. То есть, изображение в интернете имеется, но в результатах "в лоб" не выдается. Интересно было поведение чата при попытках заставить его найти правильную картину. Он начал выдавать несуществующие названия картин, а затем ответы просто пошли по кругу. Что, указывает на отсутствие принципиальной разницы между версией 4о и предыдущими. Ключевая разница, видимо, в продвинутой системе имитации поведения человека.
Или другой пример - забыл я название одного фильма и спросил чат дав ключевое слово. В ответ получил правильное название, но неправильный год и выдуманный список актеров. И это несмотря на то, что первая же ссылка в гугле указывает на этот фильм. Что неудивительно, ибо чат выдает статистически наиболее подходящую фразу, а не информацию. Удивительно другое - неглупые специалисты-программисты это далеко не всегда понимают и считают, что бот скоро будет находить правильные ответы на программистские задачи, стоит только его подучить.
В целом, удобно то, что сразу вычленяется контекст, и мне не предлагают двадцать ссылок на статьи о лучших советских фильмах, но и окончательный выхлоп крайне лимитирован. Я бы сказал, что поиск через чат имеет смысл как ленивый поиск простых вещей. Чуть более сложные случаи эффекта не дают, да и ответы всегда требуют перепроверки.
Теперь об успехах.
Встала задача написать письмо в школу. Ситуация была непростая - скулборд почти три месяца морочит голову семье беженцев с ребенком аутистом не принимая их в школу и водя по кругу. На звонки и письма соцработника идут отписки и никакого продвижения. Тем временем, школьный год подходит к концу, а ребенок деградирует. Возникла идея эскалировать вопрос и для начала написать письмо от имени родителей. Проблема еще и в том, что родители почти не владеют английским, не говоря уже об отсутствии понимания местной культуры общения, которая, в частности, исключает скандалы. Начнете скандалить - вас просто исключат из числа адекватных и будут полностью игнорировать. Попросили написать меня, а я попросил чатжпт чтобы иметь какую-то рыбу. Попросил написать письмо в школу относительно такой-то и такой-то ситуации со ссылками на такие-то законы. И он мне выдал четыре абзаца, в которых мне пришлось заменить только одно слово и вписать имена. Письмо было написано настолько хорошо, словно писал его профессиональный юрист. Предельно вежливо и корректно, но и настолько жестко, что у впечатлительного адресата наверняка бы выступил пот при прочтении. Главный момент, который был ясен из контекста, что не исключены юридические последствия, хотя об этом и не упоминается.
Эффект превзошел любые ожидания. На следующий день из школы позвонили и через переводчика объяснили, что они не смогли ничего найти, но вот в сентябре открывается новый центр... Я предложил подождать пару дней и затем написать второе письмо уточняя, правильно ли мы поняли, что они не могут обеспечить ... и т.д. Но через два дня вариант внезапно нашелся, и родителей пригласили посмотреть подходит ли школа. Излишне говорить, что я бы и близко так написать не смог, и эффект не был бы столь оглушителен, если бы чиновники не прочли между строк серьезные проблемы с эскалацией вопроса вплоть до судебного иска.
И вот, в этом контексте, ChatGPT однозначно имеет успех и точно представляет угрозу армии юристов и особенно паралигал, которые кормятся заполнением форм и написанием формальных писем.