Это страница обсуждения для обсуждения WikiProject Computer science и всего, что связано с его целями и задачами. |
|
Архивы : Указатель , 1 , 2 , 3 , 4 , 5 , 6 , 7 , 8 , 9 , 10 , 11 |
WikiProject Информатика | (Номинальный проектный класс) |
---|---|
AlphaFold , трансформаторные сети и «механизмы внимания» в машинном обучении
Учитывая недавний « важный научный прорыв», который AlphaFold приветствовал за его результаты в задаче прогнозирования структуры белка на CASP 14, который, как полагают, использует две трансформаторные сети в качестве ключевого ядра своей конструкции; и использование трансформаторных сетей также в компьютерном зрении, я оставил следующее на Talk: Transformer (модель машинного обучения) , но я повторно публикую его здесь, на случай, если кто-нибудь с недавним опытом в области машинного обучения / глубокого обучения / искусственного интеллект может помочь.
На этой странице я спросил, можем ли мы попытаться представить, что трансформаторные сети пытаются сделать, в более общей перспективе, более широкой и более общей, чем их использование в НЛП .
В AlphaFold # Algorithm я написал, что трансформаторы
"осуществляют математическое преобразование [элементов двух матриц функций и характеристик].
Эти преобразования имеют эффект объединения соответствующих данных и фильтрации нерелевантных данных для этих двух взаимосвязей контекстно-зависимым способом (" механизм внимания "), что само по себе можно узнать из данных обучения".
Я был бы признателен за информацию о том, правильно ли я понимаю это?
Выполняют ли трансформеры работу, аналогичную узким местам сетей, автокодировщикам , экстракторам скрытых переменных и другим формам нелинейных входных преобразований и методов уменьшения размеров? (Хотя очевидно, что это еще не все). Но может быть полезно попытаться определить, есть ли сходства и различия?
В заключение, ясно, что мы могли бы использовать статью о внимании (машинном обучении) , также известном как сети внимания , или механизмы внимания . Некоторые из нижеперечисленных, найденных Google, выглядят так, как будто они могут иметь отношение к делу, но было бы неплохо получить хотя бы заглушку, созданную кем-то, кто немного разбирается в этом.
- Внимание и память в глубоком обучении
- Лилиан Вен, внимание? Внимание!
- Механизм внимания , FloydHub
- Буомсу Ким, механизм внимания
Кто-нибудь почувствует, что они могут помочь с этим? Джилд ( разговорное ) 15:20, 2 декабря 2020 г. (UTC)
- Нужны ли для этого ссылки / вводная информация? Я довольно долго работал с повторяющимися нейронными сетями и накопил несколько ссылок, которые могут быть полезны (хотя некоторые могут быть довольно устаревшими ...) - Идемериализм ( разговор ) 21:54, 8 апреля 2021 (UTC)
Википедия: Органайзер песочницы
Организатор песочницы Место, чтобы помочь вам организовать вашу работу |
всем привет
Последние несколько месяцев я работал над инструментом, который может вам пригодиться. Википедия: Органайзер Sandbox - это набор инструментов, которые помогут вам лучше организовать черновики статей и другие страницы в пользовательском пространстве. Он также включает области для хранения ваших списков дел, закладок, списка инструментов. Вы можете настроить органайзер песочницы, чтобы добавить новые функции и разделы. После создания вы можете получить к нему доступ, просто щелкнув ссылку песочницы вверху страницы. Вы можете создать, а затем настроить свой собственный органайзер песочницы, просто нажав кнопку на странице. Все идеи по улучшению и другие версии были бы очень признательны.
Огромное спасибо PrimeHunter и NavinoEvans за их работу над технической частью, без них этого бы не случилось.
Надеюсь, это поможет
Джон Каммингс ( разговор ) 11:37, 6 февраля 2021 (UTC)
Чеман Шайк подлежит удалению
- Найти источники: Google ( книги · новости · газеты · ученый · бесплатные изображения · WP рефов ) · FENS · JSTOR · NYT · TWL
- Чеман Шайк (редактировать|говорить|история|ссылки|смотреть|журналы|Google) Обсуждение АдГ
Индийский изобретатель. Вопрос известности и источников. 7 и 6 = тринадцать ( ☎ ) 15:42, 2 марта 2021 г. (UTC)
Приглашение в WikiProject Искусственный интеллект
Всем, кто заинтересован в улучшении освещения искусственного интеллекта в Википедии, просьба поддержать предложение WikiProject: Wikipedia: WikiProject_Council / Proposals / Artificial_Intelligence . Спасибо! Бурриток ( разговор ) 20:18, 16 марта 2021 (UTC)
Устранение неоднозначности для бессерверных
Это место для обсуждения страницы, посвященной значениям неоднозначности compsci?
Бессерверные перенаправления на бессерверные вычисления , что дает только одно, более современное значение. Я думаю, это должна быть страница значений.
Существует большая разница между классическими и современными бессерверными вычислениями, и существует множество примеров классического типа.
Из того, что я прочитал в « Устранении неоднозначности», это требует обсуждения, прежде чем приступить к делу.
Дэн Ширер ( разговорное ) 15:11, 18 марта 2021 (UTC)
- @ DanShearer : страница значений может потребоваться, если есть несколько статей, охватывающих этот термин. Бессерверные вычисления - это одна статья. Какие еще? ~ Kvng ( обсуждение ) 13:30, 23 марта 2021 (UTC)
- @ Kvng : Я больше думал о том, что «Serverless» традиционно означает «локальный» или «встроенный», и поэтому ссылается на встроенные базы данных, будь то SQlite, ISAM или Firebird Embedded . Та же самая страница SQLite, на которую я ссылался, имела версию 2007 года, использующую обычную для того времени терминологию, до того значения, которое теперь используется в википедии. Возможно, вместо страницы значений неоднозначности следует использовать термин «без сервера»?
- @ DanShearer : Хорошо, но, по-видимому, в Википедии нет статей, посвященных этому значению термина. Если вы думаете, что это важная тема, возможно, напишите статью-заглушку, и тогда мы сможем поговорить о странице с разрешением неоднозначности. ~ Kvng ( разговор ) 16:08, 26 марта 2021 (UTC)
сеть
net and work - это невероятный метод передачи данных напрямую в воздушное сообщение, поскольку название прикладной сети просто означает, что передача данных с одной стороны на другую с помощью аналитики, в основном, в настоящее время работа с технологиями стала более широкой на глобальном уровне до настоящего времени и коммуникация, отправляющая средства массовой информации, сыграла роль для общества, которое стало более легким для передачи массы в эфир в обе стороны от игры к игре, которая сосредоточена на аналитической сети, определила, что несколько сообщений передаются по воздуху - предшествующий неподписанный комментарий, добавленный Дахиру далхату ( обсуждение • вклад ) 20:58, 30 марта 2021 (UTC)
Альфред Ахо (Премия Тьюринга)
Мы хотим очистить статью об Альфреде Ахо, чтобы убедиться, что описание его работы является точным и правильно процитировано. Ваша помощь будет очень кстати. Джофджоф ( разговор ) 08:42, 1 апреля 2021 (UTC)
Категория: Научные статьи, требующие внимания специалистов
Приглашаем вас принять участие в обсуждении Wikipedia_talk: WikiProject_Science # Category: Science_articles_needing_expert_attention по следующим статьям:
- Обработка изображений с микроскопа
- Поиск музыкальной информации
- 15 статей предметно о других дисциплинах. - Прачечная Пицца 03 ( d c̄ ) 14:36, 12 мая 2021 г. (UTC)