????? ????????? ?? ??????? ????? ??? ????????

??? ?????? ??? ????? ????????????? ????????? (??) ??????? ????? ?? ??????? ??????????. ? ????????? ????? ?? ?????????? ????????? ???????? ? ?????????? ?????? ?????????? ? ????? ? ???????????: ?? ?????-?????????? ?? ?????????? ?? ????????????? ???????????? ?????????. ????? ?? ?????? ???????? ?? ???? ????? ?? ???????, ? ????? ??? ??????????, ????? ?????, ????? ????????? ????????? ??? ?? ?????? ??????????????? ? ?? ??????????? ???????????. ? ?????????????? ?????? ?? ?????????? ????? ????????? ? ?????????????? ??????, ??????? ????? ??????? ??? ??????????, ??? ? ????????????????? ????????? ? ???? AI.

??? ?????????? ??? ???????????????? ??? ???

??? ????????????? ??? ?????????????? ? ????????????? ??????????? ??????? ???????? ?????????? ?????????, ??????????, ??????? ? ???????, ??????? ???? ??????????? ???????????, ???????????, ??????????? ? ???????? ? ?????? ?????? ????????? ????????. ??? ????? ???? ??? ?? ????? ???? ????? ??? ???-???????? ????????? ? ??? ???????? ???????????????? API, ??? ? ????? ???????, ??????? ???????????? ????? ???????? ?????????? ??? ??????????????? ??????????.

???????????????? ???? ??????????????:

  • ????????? ????????? ???????? — ???????? ??? ???????? ??????????.
  • ???????? ??????? — ?????? ??? ??????? ????????? ?? ??? ???????? ?????????? ??????.
  • ?????????? ????????? — ???????? ??? ???????????? ?????? ? ???????? ???????? ??? ????????????????.
  • ??????????? ??? ??????????? ?????? — ?????????? ? ?????? ??? ?????????? ??????? ??????.
  • ??????????? ????????????? ML-???????? — AutoML-?????????.

?????? ?? ?????? ????? ?????? ???? ???????? ? ??????? ????????? ?????????? ????????????.

????????? ?????????? ????????: ???? ??????????? ??-????????

TensorFlow: ????? ?????????

???? ???????????? ???????? — TensorFlow, ????????????? Google Brain. ? ??????? ?????? ?????? ? 2015 ???? ?? ???? ??-????? ???????? ? ????? ????????? ????? ???????????? ? ????????????? ????????? ?????????? ?????: ?? ????????????? ??????? ?? ????????, ????? ??? pin up, ??? ????????? ????????????? ?????.

???????????? TensorFlow:

  • ????????????? Python, ?? ???? ????, ??????????? ? ?????? ?????? ????????????????.
  • ?????? ????????? ???????????? (TensorBoard).
  • ?????????? ?????????: ????? ????????? ??? ?? ??????????? ??????????, ??? ? ?? ???????? GPU.
  • ??????? ?????????? ????????????? ? ????? ??????? ??????? (????????, TensorFlow Hub).

?????? ????????????: ???????????? ?????? ????????????? ?? ???? ?????????? ???? MNIST ? ??????? ????????? ??? ?? ?????? ???????? ????? ????????? ???????? ????? ???? ?? Python.

PyTorch: ??????? ??????? ??????????

???? ????????? ? ???????????? ????? ??????? ????? ? ?????????? ????????, ?? ??? ??????????? PyTorch, ????????????? Facebook AI Research. ????? ????????? ????????????, ??????? ??? ?? ??????, ?? ?????????? ?????????? ???????? ??????????? ? ?????? ?????????????? ??????.

??????? ??????????? PyTorch:

  • ???????? ??????????? ?????? ?? ???? ??????? ???????? ????? ?????????.
  • ?????????? ?????????? ????????????? ?? ????? ????.
  • ??????? ???????? ?????????????? ??? NLP (Natural Language Processing) ????? ????????? HuggingFace Transformers.
  • ??????????? CUDA ????????.

PyTorch ??????? ??????? ??? ???????? ?????????? ????? ???????? — ?????? ??????? ?????? ??????????? ????? ?????? ?? ???? ???????.

Keras: ??????? ????? ??? ?????????

??? ???, ??? ?????? ???????? ???? ???? ? ????????????? ?????????? ??? ????????? ?????????? ?????????????? ?????? ??? ?????????? ? ??????????? ???????, ???????? ???????? Keras. ??? ??????????????? ??????? ??? TensorFlow ????????? ??? ????????? ????????? ???? ????????? «?? ???????».

??? ??????? Keras:

  • ?????? ?????????.
  • ??????????? ???????? ?????????????? ???????.
  • ?????? ??????????? ? TensorFlow Extended (TFX) ??? ????????-?????.

?? ????? ????? ?? ??? ??????? ???? ????????? ?????? ????????????? ??????????? ??? ??????.

???????? ???????: ????? ????? ???????? ?????????

??????? ?? ??????????? ??????? ??????????? ?????? ??? ????? ????????? ????????? GPU — ???????? ?????????, ????? ??? ??? ??, ???? ??????????? ???????????? ??????????? ??-?????? ?? ????????? ??????.

Google Cloud Artificial Intelligence System

????????? Google ????????????? ???????? ?????? ???????: ?? AutoML ?? Vertex AI. ? ???? ????? ????? ????? ??????????? ?????? ?? ?????? ?????? ??? ??????????????? ??????? ????? Google Vision API, Natural Language API ? ??????.

????: ??????????? ??????.?????? ??????????? Google Cloud Vision API ??? ???????? ????????????? ????????? ?? ???????????.

Microsoft Azure AI Learning

Azure ML — ??? ?????????? ?? Microsoft ? ?????????? Jupyter Notebook ????? ? ????????. ??? ????? ????? ????????? ????? ? ?????????? AutoML ??? ??????? ????????? MLOps ??? ???????? ??????- ?????.

????? Azure ML:

  • ?????????? ? Power BI ??? ????????????? ??????.
  • ?????? ???????????? ?????????????? ???????????? (CPU/GPU/TPU).
  • ??????? ??????????? ??????? ????????.

Yandex DataSphere

?????????? ?????? ?????????? ????????? — Yandex DataSphere. ????????? ????????????? ?? ??????????????? ??????: ???????????? ?????? ? ???????? ??????????, ????????????? GPU ?? ???????? ? ????????????? ? ??????????? ??????? (DataLens, Object Storage).

?????????? ????: DataSphere ??????? ??????????? ??????????? ?????? ??? ???????? ????????? ??????????? ??????? ??????? ??????.

?????????? ?????: ????? ????????? ???? ?? ??????????

?? ??? ????? ?????? ??? ??? ??????????? ? ??????? ??????????? ??????????. ??? ???????? ?????, ??????, ??? ?? ??????, ??????????? ?????????? ????? ???????? ???????? ????????? ????????.

KNIME Data Analysis Framework

KNIME — ??????? open-source ????????? ????????? ?????? ? ???????????? ???????????? ???????? ?????????? ????????? ??????????. ??? ??????????? ?????? ?????? ?? ?????? ?????????? (Excel, ???? ??????), ????????? ?????????, ????????? ??????? ?? ?????? ?????????????? ? ??????????.

????? KNIME:

  • ??????? ??????? ?????????.
  • ?????????? ? ?????/R/Jupyter.
  • ??????????? ?????????? ??????????? ????? ???????.

KNIME ????????? ????? ????????? ?? ???????????? ? ???????? ?? ???? ???????? ?????? ? ???????? ????????? ??????? ??????.

Amber Statistics Extraction

????? — ????? ???? ?? ?????????? ?????????? ????????????? ?????-????????. ?? ??????? ??????? ????? ?? ??????????? ???????? ???????????? ??? ????? ????????????????. ????? ????????? ????????? ??????? ??????? ??????? ?????? ??????????? ??????: ????????? ???????? → ????????????? → ????????? ?????? → ???????????? ???????????.

???????? ???????: Orange ????? ????????? ??? ?????????? ? ????????? ?? ???????????? ?????? ????? ???????? ?????? ????????? ????, ??? ??? ?? ???????????? ?????? ????? ?????.

????????? ??????????????? ????????? ? ??????? ????????

????? ??? ???????? ??? ?????? ?????? ????????? ???? ??? ??????????????? ????????? ??, ?? ????? ????????? ???????????: ???????? ?? ?????, ??????????? ??????, ????????? ??????????? ??????. ?? ??????? ????? ???????????? ?????????? ??????????? ?????????? ? ???????, ????????, ??? ??? ??.

Pandas: ??????????????????? ??? ????????????

?????????? ?????? ?? Python ??? ???????? ???????? ??-????? ????? ???????????? ?? ?????? ?? ???? ????. ??? ???? ??????????? ???????? ? ?????????? ??????? ??? ?? ??????, ??? ? Excel ??? Google Sheets — ?????? ??????? ?????? ? ? ??????? ?????????!

????? ??????????? ????? Pandas:

  • ??????/??????? ??????? CSV/XLSX/SQL-??????/??????? JSON ??????????;
  • ??????? ?????????? ?????/???????.
  • ??????????? ????????;
  • ?????????? ??????;
  • ???????????? ???????? ?????? ?????? (??????? ???????).

Pandas ????? ??????????? ? ???? ? Matplotlib ??? Seaborn ??? ???????????? ??????????? ??????????? ????????????? ????? ??????????? ?? ???????.

OpenCV: ??????????? ???????? ?? ???????

???? ???? ???? ????????? ? ????????????? ?????????? ??? ????? (????????, ????????????? ???), ??? ??????????? OpenCV — ?????? ????????? ???????????? ????????? ??????. ??? ???????????? ??????? ???????? ????????? ???????????: ?? ??????? ???????? ?? ??????????????? ???????? ???? YOLOv5 ??? SSD MobileNet.

OpenCV ??? ????? ?????????? ? ???????????? TensorFlow / PyTorch ????? ????????? NumPy. ????????, ????????? ?????????? ?????????? ??????????? ?????????? ?????????? OpenCV + ??? ?? ?????? ? PyTorch ??? ?????????? ?????? ??????????????? ?? ?????????? ??? ????????.

NLTK & spaCy ??????????: ??????????? ????????? ??????????

??? ?????? ? ???????? ???? ?????? ????? ??????? — ?????????? NLP (Natural Language Processing). ????? ??? ?????????? NLTK (Natural Language Toolkit) ? spaCy:

NLTK library is a powerful utility for handling linguistic data. It provides accessible interfaces to over 50 corpora and lexical resources.

  • ???????? ???????? ??? ?????????? ???????? ??????? ????????? ???????????;
  • ???????? ????? ??????????????? ?????????;
  • ???? ??????????? ????????? ?????????? ?? ??????, ????????, ?????? ????.

spaCy

  • ????????? ??? ???????? ?????? ????????? ??????;
  • ?????????? ??????????? ????????? ?????;
  • ???? ????????????? ?????? ???????? ?????.

? ?? ??? ?????? ????????? ?????????? ?????????? ??? ???????? ?????? ???????? ???? ???????????? ?????????? ? ??????, ????????? ????? ??????, ??? pin up, ? ????????.

????????????? ????????? ???????? ????????: AutoML-??????? ?????????? ???????

? ?????????? ??????????? ?? ????????? ????????????? ??????????? ???????? ??????? ?????????? ???????? ??? ????????? ??????? ???????????? ?? data science. ?? ?????? ?????? ??????? AutoML (Automated Machine Learning), ??????? ????????? ????????? ????????? ????????? ??????? ??? ?????????? ?????? ????????????.

Google Automated Machine Learning & Vertex Artificial Intelligence

Google ????? ?? ????????? ????? ?????? ?????? AutoML ??? ???? ??? ???? ?????. ??????? ?? ??????? ? ????? Vertex AI ? ????????? ??????? ??????? ????????????? ??????????/????????? ??????, ???? ??? ?????????????, ??? ?? ???????? ? Python!

????? ???????? ??? ????????:

  1. ????????? ???? ?????? ????? ????????-?????????;
  2. ?????????? ?????? (????????, ????????????? ???????);
  3. ?????? ??? ????????? ??????? ???????;
  4. ???????? ??????? ??????? ?????? ? ??????????? ????????!

???? ????????? ????? ????????? ??????????? ???????? ?????? ?? ????? ?????????? ???????? ???????????????? ??????? ??????? ??? ??????????? ??????? ML-????????????.

H2O.ai Driverless AI

H2O.ai ???????? ?????? ? ???????? ???????? ????? ????????? ?? ??????????? ????????? ??????? ?????? ??? ?? ?????? Hadoop-???????? ????????? ? ?????? 2010-? ?????. ?? ??????? Driverless AI ????????? ?? ?????? ???????? ??????????? ?????? ????????? ???????? ??? ???????? ??????? («??????? ??????», «???????????? ?????? ????????»), ?? ???? ????????? ?????????? ??????? ? ???, ?????? ?????? ??????? ??? ??? ???? ?????!

???????????: Driverless AI ? ??? ?? ?????? ??????? ??????????? ??????????? ????????????????????? ?????????? ??? ?????? ? ?????????????? ????? ????????????? ????????? ?????????? ????????? ?????????? ??????? ?????? (Explainable AI).

???????? ????????? ?????????? ?? ???? ??

? ??????? ???? ????? ??????????? ????????? ???????????? ??????? AI — ?? ????? ????????? ???? ????? GPT ??? Stable Diffusion ???????? ????????? ??????, ???????? ???? ????? ??????????? «? ????». ????? ?????? ???????? ????? ???????? ?????????

OpenAI API

API ?? OpenAI ????????? ??????????? ? ????? ?? ????? ??????????? ??????????????? ???????? ?????? ??????? – GPT?4o (??? ?? ????????????). ??????????? ???? ??????? ???????????????? ???????????? ????? ???????? ????? ??? ??????? ??????? ????????-????????, – ??? ??? ?????????? ?? ???????!

? ?????????? ????????? ?????? ????????? ???????? ?????????? ?????????? ChatGPT API ??? ???????? ???-????? ????????? ???????? ???? ???????????? SEO????????? ?? ?????? ??????????? ????????? (? ?????? ????????? ??? ??????? ????).

Midjourney & Stable Diffusion WebUI

????????? ???????? ?????? ???????? ????! Midjourney – ??? ???????? ?????? ???????????? ???????? ?? ????????? ????????? («prompt’??»), ??????? ????? ?????????? ????????? ?????????? ????? ???? ???????????? ????????; Steady Diffusion ? pin up – open-source??????? c ???????????? ??????? ???????? ? ???? ? ???????? ???????? ????? WebUI-????????? ?? ?????????? Nvidia RTX 3060+.

?????????? ??????: ????????? ?? ?????-?????????? ??????? ??????? ? ????????? ?????? ????????? ????? Stable Diffusion WebUI – ???????? ???????? ? ??????? ???????? ????????????!

???????????? ???????? ????????????? ???????????? ?? ? ?? ???????

????? ???????? ?????????? ???? ???? ????????? ?? ?????? «?? ??????», ??????? ?????????????? ???????? ????? ?????????? ??????? ?????????????? ?????????? ? ??? ? ??????:

  1. ????????? ????????
    ???????? ????????? Vision API/Stable Diffusion ??? ????????????? ??????? ?? ??????????? ????????; ???-???? ???????? ?? ???? GPT?4o ????? OpenAI API; ???????????? ???????? ??????? ????? spaCy/NLTK;

  2. ?????
    ??????????????? ????????????????? ?????? ????????????? ??????? ???????????? ???????? ??????? ??????? ?????? ????? KNIME; ????????????? ???? ????????? ???????? TensorFlow/PyTorch;

  3. ???????????????
    ??????????? ?????? ????????? OpenCV/TensorFlow ??? ???????????? ??????????? ???; ????????? ????????????? ?????-?????????? ????????? ??????????????? ????????? ? ???????? ???????;

  4. ?????
    ?????????? ??????????? H2O.ai Driverless AI ??? ?????? ? ?????????????; Azure ML ??????????? ??? ???????????? ???????? ????;

  5. ??????????????? ???????
    ??????????????? ?????? ????????? ????????? ?????????? ????? ?????? SpeechKit; ????????? ??????? ???????????? ?????? ?????????????? ????????????? Pandas/OpenCV;

????? ???????? ????????? ?????? ???????

??????? ???????????? ? ?? ?? ????? ??-?? ???? ????????:

  1. ???? ??????????:
    ? ??????, ???? ?? ?????? ?????? ?????? ????????? ??????? – ?????? Keras/PyTorch + Colab/Jupyter; ????? ????? ???????????????? ?????????? – ???????? ? ??????? Vertex AI/Azure ML/Yandex DataSphere;

  2. ??????? ??????:
    ???, ??? ?????? ???????? ????? ?????????? ????????? ????????? ???????? ???? Orange/KNIME; ??????? ????????? ????? ????? TensorFlow/PyTorch + ????????? ???????;

  3. ??? ????????:
    ??? ??????? ?????? ??????????? spaCy/NLTK/HuggingFace Transformers; ??? ???????? – OpenCV/TensorFlow/PyTorch; ???? ?????? ????????????? – ?????????? ChatGPT/Midjourney/Stable Diffusion;

  4. ???????
    ????????? ?????? ?????; ????????-???????? ????????? ????????? ? ?????? ?? ????????/??????????;

???????? ???????????? ?????, ??????? ?????? ???????? ??????? ? ????? ??.

???? ? ?????????????? ????????????? ??????????? ???????? ???????????? ???? ???? ?? ?? ?? ??????????? ?????????????? ??????? ?????? ??????! ??? ???? ???????????? ?????????? ???????:

  1. ?? ????????? ??????????. ???? ? ?????? ???? ???-??? ?? ????????? ??????????? – ?? ???????? ????????? ????? ?????????????? ? ?????????? ???????.
  2. ???????????? ?????????? ???????. ????????? ???????? ??????? ?????????? ?????????? ????? ????????? ???????? – ???????? ??? ?????? ?????????!
  3. ?????????????? ???????????. ???????? ???????? ???????? ????????? ???????????? ?? ??????? ????? – ?????????? ??????!
  4. ???????????? ? ???????. ??????? ?????????? («????», ????????-????) ????????? ??????????????, ??????? ?????? ??????? ??? ?????????? ????????!
  5. ??????? ?? ?????????. ??????? ?? ???????? ?????? ???????????? – ?????????? ???????? ?? ?????????? ?????????? ???????? ????????!

?????? ? ??????????? ????????????? ?????????????? ?????????? ?????????? ??????????? ??????? ??????????? ????? ?????? ???????? ????????? ?????, ?????????? ?? ???????? ? ?????????! ??????? – ??????? ??????????????? ????? ???????????? ? ???????????? ? ???? ??????… ?? ??? ????????? ???????? ?????? ? ?????????!