Примеры AI-обобщений: выявление тем, составление обобщающих сводок, выводов и др.
Дисклеймер
“Мнение” AI может не совпадать мнением автора. Приводится в качестве примера текущих возможностей AI-ассистентов в области “семантический (смысловой) анализ текста с применением LLM”.
Справочно:
Семантический анализ текста — это процесс понимания смысла текста. В контексте больших языковых моделей (LLM), таких как GPT-3, семантический анализ используется для генерации ответов на вопросы, поиска информации и других задач, связанных с пониманием и обработкой естественного языка [1], [2].
Представь, что ты читаешь книгу. Ты не просто смотришь на буквы и слова, ты понимаешь их смысл, связываешь их друг с другом, чтобы понять общую идею. Вот и компьютеры, используя LLM, делают то же самое, только вместо головного мозга у них алгоритмы и модели машинного обучения.
Пример. Допустим, у тебя есть текст: “Собака преследует кошку”. Семантический анализ поможет понять, что в этом предложении собака — это субъект (тот, кто выполняет действие), “преследует” — это действие, а кошка — это объект (тот, на кого направлено действие). Таким образом, компьютер “понимает”, что собака преследует кошку. LLM могут использоваться для ответа на вопросы. Например, если задать вопрос “Кто преследует кошку?”, модель, обученная на большом количестве текстов, сможет правильно ответить: “Собака”[3].
Также LLM могут использоваться для генерации текста. Например, если задать начало истории “Был теплый летний день, и маленький мальчик решил…”, модель может продолжить эту историю, генерируя текст, который будет логичным продолжением начатого [4].
Важно понимать, что LLM не “понимают” текст в том смысле, как понимают люди. Они анализируют статистические связи между словами и фразами в данных, на которых они обучались, и используют эти связи для генерации ответов или текста [5].
Исходя из вопросов, которые студенты ШСМ отправляли в «Спросить у Aisystant» в период с 28 января по 04 февраля 2024 года, в качестве эксперимента, различным AI-помощникам было порочено проанализировать и обобщить пользовательские запросы. Результаты экспериментов приведены ниже.
1. C помощью функционала Edge+Copilot
1.1. Таблица
Основные темы, с которыми пользователи обращались к AI-ассистенту «Спросить у Aisystant» за период с 28 января 2024 по 04 февраля 2024 года
№ Название темы запроса Пояснение по данному запросу 1 Разбор текстов и материалов Запросы, в которых пользователи просили Aisystant разобрать и объяснить им различные тексты и материалы, связанные с системным мышлением, моделированием, интеллект-стеком, альфами и другими понятиями. 2 Проверка понимания и примеры Запросы, связанные с просьбами к Aisystant проверить их понимание различных тем и дать им примеры для лучшего усвоения материала. Например, пользователи просили примеры безмасштабных дисциплин, системных уровней, эмерджентности и других. 3 Вопросы по практикам и инструментам Пользователи интересовались у Aisystant о различных практиках и инструментах, которые могут быть полезны в системной инженерии и системном мышлении. Например, пользователи просили рассказать о самолидерстве, киберпсихике, упрощенных естественных языках и других. 4 Обсуждение и анализ кейсов В этой части пользователи просили Aisystant проанализировать различные кейсы и ситуации, связанные с системным мышлением и инженерией. Например, пользователи просили анализировать кейсы организационного изменения, проектного управления, стратегического планирования и других. 5 Вопросы по книгам и авторам Запросы, связанные с просьбами к Aisystant рассказать пользователям о различных книгах и авторах, связанных с системным мышлением и инженерией. Например, пользователи просили рассказать о книгах “Системное мышление: Наука о сложности” и “Системная инженерия: Принципы и практика”, а также об их авторах. 6 Вопросы по обучению и курсам Пользовательские запросы к Aisystant о различных курсах и обучающих материалах, связанных с системным мышлением и инженерией. Например, пользователи просили рассказать о курсах “Системное мышление для менеджеров” и “Введение в системную инженерию”, а также о том, где можно найти эти курсы и как их можно пройти. 7 Вопросы по терминологии и определениям Вопросы к Aisystant, связанные с объяснением различных терминов и определений, связанных с системным мышлением и инженерией. Например, пользователи просили объяснить термины “системный подход”, “моделирование систем”, “интеллект-стек” и другие.
1.2. Пример «аналитической записки»
Промт
Действуй как операционный менеджер — проанализируй таблицу и составь руководителю проекта сопроводительную записку по таблице в целом: выводы и всё прочее, что важно знать руководителю.
Уважаемый руководитель проекта,
Вот краткий анализ и выводы по запросам пользователей к AI-ассистенту «Спросить у Aisystant» за период с 28 января 2024 по 04 февраля 2024 года:
Разбор текстов и материалов: Пользователи активно ищут помощи в понимании сложных текстов и материалов, связанных с системным мышлением и моделированием. Это подчеркивает важность нашего AI-ассистента в облегчении процесса обучения и понимания сложных концепций.
Проверка понимания и примеры: Пользователи ценят возможность проверить свое понимание и получить дополнительные примеры для усвоения материала. Это подтверждает, что наш AI-ассистент играет ключевую роль в обучении и развитии пользователей.
Вопросы по практикам и инструментам: Пользователи интересуются различными практиками и инструментами, которые могут быть полезны в их работе. Это указывает на то, что наш AI-ассистент может быть полезным ресурсом для профессионального развития пользователей.
Обсуждение и анализ кейсов: Пользователи просили проанализировать различные кейсы и ситуации, что подчеркивает важность нашего AI-ассистента в качестве инструмента для анализа и решения проблем.
Вопросы по книгам и авторам: Пользователи интересуются различными книгами и авторами, что подчеркивает важность нашего AI-ассистента в качестве источника информации и обучения.
Вопросы по обучению и курсам: Пользователи ищут информацию о различных курсах и обучающих материалах, что подтверждает, что наш AI-ассистент может быть полезным ресурсом для непрерывного обучения.
Вопросы по терминологии и определениям: Пользователи просили объяснить различные термины и определения, что подчеркивает важность нашего AI-ассистента в качестве источника знаний.
В целом, эти данные подтверждают, что наш AI-ассистент играет важную роль в обучении и развитии пользователей, а также в предоставлении им необходимых ресурсов и информации. Мы должны продолжать улучшать его способности и функциональность, чтобы удовлетворить потребности наших пользователей.
С уважением,
Операционный менеджер
2. С помощью функционала «Copilot + “записная книжка”»
AI (Copilot в режиме “Записная книжка” выделил следующие основные темы:
2.1. Таблица
Промт:
Я дал тебе тексты пользовательских запросов к AI-ассистенту Aisystant. Твоя задача: действовать как аналитик в области семантики и выявить десять основных тем пользовательских запросов. В табличной форме, в разметке Markdown, представь списки этих тем, дай им описание, приведи по каждой выявленной тобой теме цитату из моего файла. В начале таблицы дай краткие выводы по всему файлу в целом.
Тема Описание Пример запроса Вдохновение Запросы, связанные с пониманием и поиском вдохновения. “вдохновение это” Обучение Запросы, связанные с пониманием различных видов обучения. “что такое осознанное и неосознанное обучение” Хронотоп Запросы, связанные с пониманием концепции хронотопа. “хронотоп это” Семантика Запросы, связанные с пониманием семантики. “семантика” Агентность Запросы, связанные с пониманием агентности. “агентность” Aisystant Запросы, связанные с пониманием функциональности AI-ассистента Aisystant. “Что такое Aisystant” Неустроенность Запросы, связанные с пониманием концепции неустроенности. “Неустроенность” Разбор ответов Запросы, связанные с разбором и пониманием ответов ассистента. “рзабираю твой ответ и хочу закрепить понимание” Системы создания Запросы, связанные с пониманием систем создания. “Системы создания имеют первичные названия по основной функции/практике, по их организационной роли?” Ремонт бензогенератора Запросы, связанные с практикой ремонта бензогенератора. “мастер выполняет практику чистка карбюратора с помощью компрессора, чистящей пены и инструментов для того чтобы разобрать и собрать” Выводы по файлу в целом: Ваши запросы охватывают широкий спектр тем, от общих концепций и теорий до конкретных практик и процедур. Это показывает глубокий интерес к пониманию различных аспектов знания и их применения на практике. Особое внимание уделяется пониманию работы AI-ассистента Aisystant и систем создания. Это подчеркивает важность понимания того, как эти системы функционируют и как они могут быть использованы для выполнения различных задач.
Источник.
Резюме по эксперименту:
В целом, функционалом «Edge+Copilot» пользоваться удобнее, чем функционалом «Copilot в режиме “Записная книжка”», т.к. есть возможность управлять процецессами генерации текста и таблиц непосредственно в диалоговом окне (в чате) с Copilot.
Что же касается достоверности сгенерированного AI текста, то, на мой взгляд, по сравнению с 2023 годом, в текущем 2024 году, качество генерации текстов повысилось. И, по моей оценке, AI позволяет существенно облегчить рутинные операции в деятельности службы ПМП, в том числе и те, что связанны с продвижением учебных материалов ШСМ равно как и образовательной платформы Aisystant — как минимум, если использовать AI, то при сохранении прежнего уровня качества рабочих продуктов, времени на рутину уходит в 1,5-2 раза меньше .