Size: a a a

Data science [ru]

2020 September 11
Data science [ru]
Многие лаборатории,которые работают над технологиями искусственного интеллекта,уже не раз хвастались результатами своих проектов,предназначенных для написания текстов. Новый пример такого труда — целая статья в формате«ответа на редакционную колонку», написанная сложнейшей программой и опубликованная в The Guardian.
Во вторник, 8 сентября, одно из авторитетнейших СМИ в мире — британская газета The Guardian, — опубликовало на своем веб-сайте весьма любопытный материал. Это довольно объемная статья, текст которой был написан искусственным интеллектом GPT-3, разработкой которого уже несколько лет подряд занимается некоммерческая лаборатория Open AI. С момента своего релиза в июне 2020 года, данный алгоритм уже не раз удивлял специалистов и простых читателей качеством генерируемого текста.
источник
Data science [ru]
Модуль copy - поверхностное и глубокое копирование объектов
#python
Операция присваивания не копирует объект, он лишь создаёт ссылку на объект. Для изменяемых коллекций, или для коллекций, содержащих изменяемые элементы, часто необходима такая копия, чтобы её можно было изменить, не изменяя оригинал. Данный модуль предоставляет общие (поверхностная и глубокая) операции копирования.
copy.copy(x) - возвращает поверхностную копию x.
copy.deepcopy(x) - возвращает полную копию x.
источник
2020 September 12
Data science [ru]
Kotlin выражения, заявления и блок
#Kotlin
Kotlin Expression —
Выражение состоит из переменных, операторов, вызовов методов и т. Д., Которые выдают одно значение. Как и другие языки, выражение Kotlin — это строительные блоки любой программы, которые обычно создаются для создания нового значения. Иногда его можно использовать для присвоения значения переменной в программе. Следует отметить, что выражение может содержать другое выражение.
источник
Data science [ru]
Обзор ВИЧ
#Hadoop
С самого начала обычного прорыва в Интернете многие компании-поставщики поисковых систем и компании / организации, занимающиеся электронной торговлей, боролись с регулярным ростом объема данных день ото дня. Даже некоторые сайты социальных сетей, такие как Facebook, Twitter, Instagram и т. Д., Также сталкиваются с такой же проблемой. Сегодня многие ассоциации понимают, что информация, которую они собирают, является прибыльным ресурсом для понимания их клиентов, влияния их деятельности на рынке, их эффективности и эффективности их инфраструктуры и т. Д. Так что именно здесь Hadoop появился в качестве хранителя, который обеспечивает Мы имеем эффективный способ обработки огромных наборов данных с использованием HDFS (распределенной файловой системы Hadoop) и навязываем MapReduce для разделения погрешностей вычислений на единицы, которые можно распределить по кластеру аппаратных средств (стандартное оборудование), обеспечивая масштабируемость (горизонтальная).
источник
2020 September 13
Data science [ru]
Беспилотные подлодки и новая этика. Как Китай добьется мирового господства с помощью ИИ

Президент КНР Си Цзиньпин обещает, что к 2030 году страна станет мировым лидером в высокотехнологичных отраслях. Впрочем, Китай уже ведет почти во всем – от робототехники и нанопроцессоров до солнечной энергии. Следующим шагом должна стать интеграция разных отраслей экономики и социума в единую систему управления – для этого необходимо развивать искусственный интеллект и технологии обработки больших данных.
источник
Data science [ru]
Функция, возвращающая несколько значений в языке GO
#GO
В языке Go вы можете возвращать несколько значений из функции , используя оператор return. Или, другими словами, в функции один оператор return может возвращать несколько значений. Тип возвращаемых значений аналогичен типу параметра, определенного в списке параметров.
источник
2020 September 14
Data science [ru]
Перерыв заявления в SCALA
#Scala
В Scala мы используем оператор break, чтобы прервать выполнение цикла в программе. Язык программирования Scala не содержит никакой концепции оператора break (в версиях выше 2.8), вместо оператора break он предоставляет метод break , который используется для прерывания выполнения программы или цикла. Метод разрыва используется путем импорта scala.util.control.breaks._ package .
источник
Data science [ru]
Пройди трёхдневное обучение от Екатерины Тимофеевой — инженера-тестировщика в компании «КРОК инкорпорейтед». Проверь свои силы на реальных задачах и научись тестировать:
👉 https://clc.am/p_so2w.

В программе онлайн-интенсива:

💻 введение в профессию;
💻 разбор основных видов тестирования;
💻 знакомство ‌с‌ инструментарием для автоматизации‌‌;
💻 работа с популярным расширением Selenium IDE.

Подключайся к прямому эфиру 17–19 сентября в 13:00 по московскому времени!

🎁 Участвуй в интенсиве, прокачивай знания и получи в подарок электронную книгу «Век живи — век учись», а также возможность выиграть сертификат на 30 000 рублей для обучения в Skillbox.
источник
2020 September 15
Data science [ru]
Половину правонарушений в Ялте удалось раскрыть благодаря системе интеллектуального видеонаблюдения

Как пояснил начальник Управления МВД России по г. Ялта Виктор Шварц, с началом работы в Ялте проекта «Умный город», статистика раскрываемости правонарушений существенно увеличилась.

«Практически по всем видам преступлений, за исключением дистанционного мошенничества, в первую очередь обращаемся в ЕДДС-112 для получения доступа к записям с камер видеонаблюдения, - отметил Виктор Шварц. - В настоящий момент из общего числа раскрытых преступлений, порядка 50 % были раскрыты благодаря информации с камер видеонаблюдения».
источник
Data science [ru]
Модуль functools
#python

Модуль functools - сборник функций высокого уровня: взаимодействующих с другими функциями или возвращающие другие функции.
Модуль functools определяет следующие функции:
functools.cmp_to_key(func) - превращает функцию сравнения в key-функцию. Используется с инструментами, принимающие key-функции (sorted(), min(), max(), heapq.nlargest(), heapq.nsmallest(), itertools.groupby()). Эта функция в основном используется в качестве переходного инструмента для программ, преобразованных из Python 2, которые поддерживали использование функций сравнения.
источник
2020 September 16
Data science [ru]
Переменные в Scala
#Scala
Переменные — это просто место хранения. Каждая переменная известна по своему имени и хранит некоторую известную и неизвестную часть информации, известную как значение. Таким образом, можно определить переменную по ее типу данных и имени, тип данных отвечает за выделение памяти для переменной. В Scala есть два типа переменных:
источник
Data science [ru]
Думаешь, Data Science не для всех? Убедись, что для разработки искусственного интеллекта достаточно базовой арифметики! Попробуй свои силы на бесплатном интенсиве от Skillbox.

Регистрация по ссылке: 🔜 https://clc.am/FjD48Q.
Опыт в программировании для участия не нужен!


Что тебя ждёт?
Экспресс-введение в Python.
Работа с библиотеками Matplotlib и Scikit-Learn.
Загрузка и визуализация данных.
Построение модели от начала до конца.
Оценка качества полученной модели.
Подарки от Skillbox и издательства МИФ.

💡 Участвуй в интенсиве и убедись, что Machine Learning — профессия будущего, доступная каждому!
источник
Data science [ru]
Наука о данных: необходимые навыки
#Hadoop
Наука о данных — это междисциплинарная область научных методов, процессов, алгоритмов и систем для извлечения знаний или знаний из данных в различных формах, структурированных или неструктурированных, аналогичных интеллектуальному анализу данных.

Big Data Analytics или Data Science — это очень распространенный термин в ИТ-индустрии, потому что все знают, что это какой-то причудливый термин, который поможет нам справиться с таким огромным количеством данных, которые мы генерируем в наши дни.
Давайте выясним, какие навыки необходимы:
источник
2020 September 17
Data science [ru]
Kotlin if-else выражения
#Kotlin
Принятие решений в программировании аналогично принятию решений в реальной жизни. В программировании также определенный блок кода должен выполняться, когда выполняется какое-то условие. Язык программирования использует управляющие операторы для управления потоком выполнения программы на основе определенных условий. Если условие истинно, то оно входит в условный блок и выполняет инструкции.
источник
Data science [ru]
Онлайн-форум “INFADAY 2020. Как обеспечить готовность цифровых организаций“

Когда:
24 сентября 2020 года, с 10:00 до 17:30 по Москве.
Где: онлайн.
Стоимость: бесплатно

О мероприятии:
Текущая ситуация стала вызовом для всех сфер бизнеса и коснулась каждой компании. Мы обобщили самые частые запросы, которые к нам поступают, и организовали онлайн-форум для их обсуждения. На форуме выступят эксперты DIS Group и представители международных лидирующих компаний: Банк ВТБ, Теле2, Онлайн-кинотеатр ivi, Сбербанк, банк Монте дей Паски ди Сиена, Lamoda, Утконос, и других.

Среди проблем, которые будут обсуждаться на форуме:
❓Кратчайший путь к цифровой организации с помощью данных.
❓Как оценить уровень Data Excellence в организации.
❓Что важно учесть и не упустить при планировании и реализации Data Strategy.
❓Какие технологии необходимы, чтобы поддержать стратегию.
❓Как бизнес-пользователю сделать правильный заказ на данные.
❓«Я могу найти данные сам». Self-service для бизнес-пользователей, или как получить данные без обращения в ИТ.
❓Какие данные есть в системах и насколько они достоверны — инструменты оценки.
❓Классификация и терминология — сокращение времени на подготовку качественной отчетности.
❓Более точные прогнозы, более результативные предложения для клиентов.
❓Контроль доступа к данным — технологические возможности актуальны как никогда.
❓Как и где хранить данные («Аренадата»).
❓Бесперебойная работа ИТ.
❓Взгляд в будущее: roadmap цифровой организации.

Ключевые спикеры мероприятия:
👤 Олег Гиацинтов, технический директор, DIS Group.
👤 Павел Лихницкий, генеральный директор, DIS Group.
👤 Эмилио Вальдес (Emilio Valdes), вице-президент, регион EMEA, EE, MEA & LATAM, Informatica.
👤 Эндрю Джосс (Andrew Joss), директор индустриального консалтинга, Informatica.
👤 Иван Черницын, руководитель Центра аналитических решений Дирекции региональных продаж, «Газпром нефть».
👤 Сергей Золотарев, генеральный директор, Arenadata.
👤 Виктор Булгаков, руководитель службы развития систем управления данными, банк ВТБ.
👤 Фабио Скиера, банк «Монте дей Паски ди Сиена».
👤 Евгений Васильев, руководитель направления BMC Software, DIS Group.
👤 Василий Хасанов, ведущий эксперт по маскированию данных, DIS Group

Подробности и регистрация: https://bit.ly/3iyYYrM
источник
Data science [ru]
Модуль os.path
#Python
os.path является вложенным модулем в модуль os, и реализует некоторые полезные функции для работы с путями.
os.path.abspath(path) - возвращает нормализованный абсолютный путь.
os.path.basename(path) - базовое имя пути (эквивалентно os.path.split(path)[1]).
os.path.commonprefix(list) - возвращает самый длинный префикс всех путей в списке.
источник
2020 September 18
Data science [ru]
Карта Kotlin: Mapof ()
#Kotlin
Карта Котлин — это коллекция, которая содержит пары объектов. Карта содержит данные в виде пар, которые состоят из ключа и значения. Ключи карты являются уникальными, и карта содержит только одно значение для каждого ключа.
Котлин различает неизменяемые и изменчивые карты. Неизменяемые карты, созданные с помощью mapOf (), означают, что они доступны только для чтения, а изменяемые карты, созданные с помощью mutableMapOf (), означают, что мы можем выполнять как чтение, так и запись.
источник
Data science [ru]
Искусственный интеллект поможет управлять двигателями.
Создание систем автоматического управления – высший пилотаж в авиационном моторостроении. Инженеры Объединённой двигателестроительной корпорации разрабатывают такие законы управления, которые в самой сложной ситуации настраивают системы двигателя на работу в оптимальном режиме. Но на каждый случай в полёте свой алгоритм не придумаешь. Поэтому в ОДК_Климов решили научить моторы принимать решения самостоятельно.
Для искусственного интеллекта такая задача по силам. Нейросетевые алгоритмы позволяют системе самообучиться. После этого система автоматического управления будет подбирать оптимальные настройки для любой ситуации, в которой окажется двигатель. Первым изделием, которое станет принимать решения на лету, должен стать перспективный ВК-650В для лёгких вертолётов.
источник
2020 September 19
Data science [ru]
Архитектура и работа улья
#Hadoop

Основные компоненты Hive и его взаимодействие с Hadoop показаны на рисунке ниже, и все компоненты описаны далее:

Пользовательский интерфейс (UI) —
Как следует из названия, пользовательский интерфейс обеспечивает интерфейс между пользователем и кустом. Это позволяет пользователю отправлять запросы и другие операции в систему. Пользовательский интерфейс поддерживается веб-интерфейсом Hive, командной строкой Hive и Hive HD Insight (на сервере Windows).
источник
Data science [ru]
Типы данных в GO
#GO

Типы данных определяют тип данных, который может содержать допустимая переменная Go . В языке Go этот тип делится на четыре категории:

Основной тип: числа, строки и логические значения подпадают под эту категорию.
Тип агрегата: Массив и структуры подпадают под эту категорию.
Тип ссылки: указатели, фрагменты, карты, функции и каналы подпадают под эту категорию.
Тип интерфейса
Здесь мы обсудим основные типы данных на языке Go. Основные типы данных далее подразделяются на три подкатегории:
чисел
Булевы
Струны
источник