????? ????????? ?? ??????? ????? ??? ????????
??? ?????? ??? ????? ????????????? ????????? (??) ??????? ????? ?? ??????? ??????????. ? ????????? ????? ?? ?????????? ????????? ???????? ? ?????????? ?????? ?????????? ? ????? ? ???????????: ?? ?????-?????????? ?? ?????????? ?? ????????????? ???????????? ?????????. ????? ?? ?????? ???????? ?? ???? ????? ?? ???????, ? ????? ??? ??????????, ????? ?????, ????? ????????? ????????? ??? ?? ?????? ??????????????? ? ?? ??????????? ???????????. ? ?????????????? ?????? ?? ?????????? ????? ????????? ? ?????????????? ??????, ??????? ????? ??????? ??? ??????????, ??? ? ????????????????? ????????? ? ???? AI.
??? ?????????? ??? ???????????????? ??? ???
??? ????????????? ??? ?????????????? ? ????????????? ??????????? ??????? ???????? ?????????? ?????????, ??????????, ??????? ? ???????, ??????? ???? ??????????? ???????????, ???????????, ??????????? ? ???????? ? ?????? ?????? ????????? ????????. ??? ????? ???? ??? ?? ????? ???? ????? ??? ???-???????? ????????? ? ??? ???????? ???????????????? API, ??? ? ????? ???????, ??????? ???????????? ????? ???????? ?????????? ??? ??????????????? ??????????.
???????????????? ???? ??????????????:
- ????????? ????????? ???????? — ???????? ??? ???????? ??????????.
- ???????? ??????? — ?????? ??? ??????? ????????? ?? ??? ???????? ?????????? ??????.
- ?????????? ????????? — ???????? ??? ???????????? ?????? ? ???????? ???????? ??? ????????????????.
- ??????????? ??? ??????????? ?????? — ?????????? ? ?????? ??? ?????????? ??????? ??????.
- ??????????? ????????????? ML-???????? — AutoML-?????????.
?????? ?? ?????? ????? ?????? ???? ???????? ? ??????? ????????? ?????????? ????????????.
????????? ?????????? ????????: ???? ??????????? ??-????????
TensorFlow: ????? ?????????
???? ???????????? ???????? — TensorFlow, ????????????? Google Brain. ? ??????? ?????? ?????? ? 2015 ???? ?? ???? ??-????? ???????? ? ????? ????????? ????? ???????????? ? ????????????? ????????? ?????????? ?????: ?? ????????????? ??????? ?? ????????, ????? ??? pin up, ??? ????????? ????????????? ?????.
???????????? TensorFlow:
- ????????????? Python, ?? ???? ????, ??????????? ? ?????? ?????? ????????????????.
- ?????? ????????? ???????????? (TensorBoard).
- ?????????? ?????????: ????? ????????? ??? ?? ??????????? ??????????, ??? ? ?? ???????? GPU.
- ??????? ?????????? ????????????? ? ????? ??????? ??????? (????????, TensorFlow Hub).
?????? ????????????: ???????????? ?????? ????????????? ?? ???? ?????????? ???? MNIST ? ??????? ????????? ??? ?? ?????? ???????? ????? ????????? ???????? ????? ???? ?? Python.
PyTorch: ??????? ??????? ??????????
???? ????????? ? ???????????? ????? ??????? ????? ? ?????????? ????????, ?? ??? ??????????? PyTorch, ????????????? Facebook AI Research. ????? ????????? ????????????, ??????? ??? ?? ??????, ?? ?????????? ?????????? ???????? ??????????? ? ?????? ?????????????? ??????.
??????? ??????????? PyTorch:
- ???????? ??????????? ?????? ?? ???? ??????? ???????? ????? ?????????.
- ?????????? ?????????? ????????????? ?? ????? ????.
- ??????? ???????? ?????????????? ??? NLP (Natural Language Processing) ????? ????????? HuggingFace Transformers.
- ??????????? CUDA ????????.
PyTorch ??????? ??????? ??? ???????? ?????????? ????? ???????? — ?????? ??????? ?????? ??????????? ????? ?????? ?? ???? ???????.
Keras: ??????? ????? ??? ?????????
??? ???, ??? ?????? ???????? ???? ???? ? ????????????? ?????????? ??? ????????? ?????????? ?????????????? ?????? ??? ?????????? ? ??????????? ???????, ???????? ???????? Keras. ??? ??????????????? ??????? ??? TensorFlow ????????? ??? ????????? ????????? ???? ????????? «?? ???????».
??? ??????? Keras:
- ?????? ?????????.
- ??????????? ???????? ?????????????? ???????.
- ?????? ??????????? ? TensorFlow Extended (TFX) ??? ????????-?????.
?? ????? ????? ?? ??? ??????? ???? ????????? ?????? ????????????? ??????????? ??? ??????.
???????? ???????: ????? ????? ???????? ?????????
??????? ?? ??????????? ??????? ??????????? ?????? ??? ????? ????????? ????????? GPU — ???????? ?????????, ????? ??? ??? ??, ???? ??????????? ???????????? ??????????? ??-?????? ?? ????????? ??????.
Google Cloud Artificial Intelligence System
????????? Google ????????????? ???????? ?????? ???????: ?? AutoML ?? Vertex AI. ? ???? ????? ????? ????? ??????????? ?????? ?? ?????? ?????? ??? ??????????????? ??????? ????? Google Vision API, Natural Language API ? ??????.
????: ??????????? ??????.?????? ??????????? Google Cloud Vision API ??? ???????? ????????????? ????????? ?? ???????????.
Microsoft Azure AI Learning
Azure ML — ??? ?????????? ?? Microsoft ? ?????????? Jupyter Notebook ????? ? ????????. ??? ????? ????? ????????? ????? ? ?????????? AutoML ??? ??????? ????????? MLOps ??? ???????? ??????- ?????.
????? Azure ML:
- ?????????? ? Power BI ??? ????????????? ??????.
- ?????? ???????????? ?????????????? ???????????? (CPU/GPU/TPU).
- ??????? ??????????? ??????? ????????.
Yandex DataSphere
?????????? ?????? ?????????? ????????? — Yandex DataSphere. ????????? ????????????? ?? ??????????????? ??????: ???????????? ?????? ? ???????? ??????????, ????????????? GPU ?? ???????? ? ????????????? ? ??????????? ??????? (DataLens, Object Storage).
?????????? ????: DataSphere ??????? ??????????? ??????????? ?????? ??? ???????? ????????? ??????????? ??????? ??????? ??????.
?????????? ?????: ????? ????????? ???? ?? ??????????
?? ??? ????? ?????? ??? ??? ??????????? ? ??????? ??????????? ??????????. ??? ???????? ?????, ??????, ??? ?? ??????, ??????????? ?????????? ????? ???????? ???????? ????????? ????????.
KNIME Data Analysis Framework
KNIME — ??????? open-source ????????? ????????? ?????? ? ???????????? ???????????? ???????? ?????????? ????????? ??????????. ??? ??????????? ?????? ?????? ?? ?????? ?????????? (Excel, ???? ??????), ????????? ?????????, ????????? ??????? ?? ?????? ?????????????? ? ??????????.
????? KNIME:
- ??????? ??????? ?????????.
- ?????????? ? ?????/R/Jupyter.
- ??????????? ?????????? ??????????? ????? ???????.
KNIME ????????? ????? ????????? ?? ???????????? ? ???????? ?? ???? ???????? ?????? ? ???????? ????????? ??????? ??????.
Amber Statistics Extraction
????? — ????? ???? ?? ?????????? ?????????? ????????????? ?????-????????. ?? ??????? ??????? ????? ?? ??????????? ???????? ???????????? ??? ????? ????????????????. ????? ????????? ????????? ??????? ??????? ??????? ?????? ??????????? ??????: ????????? ???????? → ????????????? → ????????? ?????? → ???????????? ???????????.
???????? ???????: Orange ????? ????????? ??? ?????????? ? ????????? ?? ???????????? ?????? ????? ???????? ?????? ????????? ????, ??? ??? ?? ???????????? ?????? ????? ?????.
????????? ??????????????? ????????? ? ??????? ????????
????? ??? ???????? ??? ?????? ?????? ????????? ???? ??? ??????????????? ????????? ??, ?? ????? ????????? ???????????: ???????? ?? ?????, ??????????? ??????, ????????? ??????????? ??????. ?? ??????? ????? ???????????? ?????????? ??????????? ?????????? ? ???????, ????????, ??? ??? ??.
Pandas: ??????????????????? ??? ????????????
?????????? ?????? ?? Python ??? ???????? ???????? ??-????? ????? ???????????? ?? ?????? ?? ???? ????. ??? ???? ??????????? ???????? ? ?????????? ??????? ??? ?? ??????, ??? ? Excel ??? Google Sheets — ?????? ??????? ?????? ? ? ??????? ?????????!
????? ??????????? ????? Pandas:
- ??????/??????? ??????? CSV/XLSX/SQL-??????/??????? JSON ??????????;
- ??????? ?????????? ?????/???????.
- ??????????? ????????;
- ?????????? ??????;
- ???????????? ???????? ?????? ?????? (??????? ???????).
Pandas ????? ??????????? ? ???? ? Matplotlib ??? Seaborn ??? ???????????? ??????????? ??????????? ????????????? ????? ??????????? ?? ???????.
OpenCV: ??????????? ???????? ?? ???????
???? ???? ???? ????????? ? ????????????? ?????????? ??? ????? (????????, ????????????? ???), ??? ??????????? OpenCV — ?????? ????????? ???????????? ????????? ??????. ??? ???????????? ??????? ???????? ????????? ???????????: ?? ??????? ???????? ?? ??????????????? ???????? ???? YOLOv5 ??? SSD MobileNet.
OpenCV ??? ????? ?????????? ? ???????????? TensorFlow / PyTorch ????? ????????? NumPy. ????????, ????????? ?????????? ?????????? ??????????? ?????????? ?????????? OpenCV + ??? ?? ?????? ? PyTorch ??? ?????????? ?????? ??????????????? ?? ?????????? ??? ????????.
NLTK & spaCy ??????????: ??????????? ????????? ??????????
??? ?????? ? ???????? ???? ?????? ????? ??????? — ?????????? NLP (Natural Language Processing). ????? ??? ?????????? NLTK (Natural Language Toolkit) ? spaCy:
NLTK library is a powerful utility for handling linguistic data. It provides accessible interfaces to over 50 corpora and lexical resources.
- ???????? ???????? ??? ?????????? ???????? ??????? ????????? ???????????;
- ???????? ????? ??????????????? ?????????;
- ???? ??????????? ????????? ?????????? ?? ??????, ????????, ?????? ????.
spaCy
- ????????? ??? ???????? ?????? ????????? ??????;
- ?????????? ??????????? ????????? ?????;
- ???? ????????????? ?????? ???????? ?????.
? ?? ??? ?????? ????????? ?????????? ?????????? ??? ???????? ?????? ???????? ???? ???????????? ?????????? ? ??????, ????????? ????? ??????, ??? pin up, ? ????????.
????????????? ????????? ???????? ????????: AutoML-??????? ?????????? ???????
? ?????????? ??????????? ?? ????????? ????????????? ??????????? ???????? ??????? ?????????? ???????? ??? ????????? ??????? ???????????? ?? data science. ?? ?????? ?????? ??????? AutoML (Automated Machine Learning), ??????? ????????? ????????? ????????? ????????? ??????? ??? ?????????? ?????? ????????????.
Google Automated Machine Learning & Vertex Artificial Intelligence
Google ????? ?? ????????? ????? ?????? ?????? AutoML ??? ???? ??? ???? ?????. ??????? ?? ??????? ? ????? Vertex AI ? ????????? ??????? ??????? ????????????? ??????????/????????? ??????, ???? ??? ?????????????, ??? ?? ???????? ? Python!
????? ???????? ??? ????????:
- ????????? ???? ?????? ????? ????????-?????????;
- ?????????? ?????? (????????, ????????????? ???????);
- ?????? ??? ????????? ??????? ???????;
- ???????? ??????? ??????? ?????? ? ??????????? ????????!
???? ????????? ????? ????????? ??????????? ???????? ?????? ?? ????? ?????????? ???????? ???????????????? ??????? ??????? ??? ??????????? ??????? ML-????????????.
H2O.ai Driverless AI
H2O.ai ???????? ?????? ? ???????? ???????? ????? ????????? ?? ??????????? ????????? ??????? ?????? ??? ?? ?????? Hadoop-???????? ????????? ? ?????? 2010-? ?????. ?? ??????? Driverless AI ????????? ?? ?????? ???????? ??????????? ?????? ????????? ???????? ??? ???????? ??????? («??????? ??????», «???????????? ?????? ????????»), ?? ???? ????????? ?????????? ??????? ? ???, ?????? ?????? ??????? ??? ??? ???? ?????!
???????????: Driverless AI ? ??? ?? ?????? ??????? ??????????? ??????????? ????????????????????? ?????????? ??? ?????? ? ?????????????? ????? ????????????? ????????? ?????????? ????????? ?????????? ??????? ?????? (Explainable AI).
???????? ????????? ?????????? ?? ???? ??
? ??????? ???? ????? ??????????? ????????? ???????????? ??????? AI — ?? ????? ????????? ???? ????? GPT ??? Stable Diffusion ???????? ????????? ??????, ???????? ???? ????? ??????????? «? ????». ????? ?????? ???????? ????? ???????? ?????????
OpenAI API
API ?? OpenAI ????????? ??????????? ? ????? ?? ????? ??????????? ??????????????? ???????? ?????? ??????? – GPT?4o (??? ?? ????????????). ??????????? ???? ??????? ???????????????? ???????????? ????? ???????? ????? ??? ??????? ??????? ????????-????????, – ??? ??? ?????????? ?? ???????!
? ?????????? ????????? ?????? ????????? ???????? ?????????? ?????????? ChatGPT API ??? ???????? ???-????? ????????? ???????? ???? ???????????? SEO????????? ?? ?????? ??????????? ????????? (? ?????? ????????? ??? ??????? ????).
Midjourney & Stable Diffusion WebUI
????????? ???????? ?????? ???????? ????! Midjourney – ??? ???????? ?????? ???????????? ???????? ?? ????????? ????????? («prompt’??»), ??????? ????? ?????????? ????????? ?????????? ????? ???? ???????????? ????????; Steady Diffusion ? pin up – open-source??????? c ???????????? ??????? ???????? ? ???? ? ???????? ???????? ????? WebUI-????????? ?? ?????????? Nvidia RTX 3060+.
?????????? ??????: ????????? ?? ?????-?????????? ??????? ??????? ? ????????? ?????? ????????? ????? Stable Diffusion WebUI – ???????? ???????? ? ??????? ???????? ????????????!
???????????? ???????? ????????????? ???????????? ?? ? ?? ???????
????? ???????? ?????????? ???? ???? ????????? ?? ?????? «?? ??????», ??????? ?????????????? ???????? ????? ?????????? ??????? ?????????????? ?????????? ? ??? ? ??????:
-
????????? ????????
???????? ????????? Vision API/Stable Diffusion ??? ????????????? ??????? ?? ??????????? ????????; ???-???? ???????? ?? ???? GPT?4o ????? OpenAI API; ???????????? ???????? ??????? ????? spaCy/NLTK; -
?????
??????????????? ????????????????? ?????? ????????????? ??????? ???????????? ???????? ??????? ??????? ?????? ????? KNIME; ????????????? ???? ????????? ???????? TensorFlow/PyTorch; -
???????????????
??????????? ?????? ????????? OpenCV/TensorFlow ??? ???????????? ??????????? ???; ????????? ????????????? ?????-?????????? ????????? ??????????????? ????????? ? ???????? ???????; -
?????
?????????? ??????????? H2O.ai Driverless AI ??? ?????? ? ?????????????; Azure ML ??????????? ??? ???????????? ???????? ????; -
??????????????? ???????
??????????????? ?????? ????????? ????????? ?????????? ????? ?????? SpeechKit; ????????? ??????? ???????????? ?????? ?????????????? ????????????? Pandas/OpenCV;
????? ???????? ????????? ?????? ???????
??????? ???????????? ? ?? ?? ????? ??-?? ???? ????????:
-
???? ??????????:
? ??????, ???? ?? ?????? ?????? ?????? ????????? ??????? – ?????? Keras/PyTorch + Colab/Jupyter; ????? ????? ???????????????? ?????????? – ???????? ? ??????? Vertex AI/Azure ML/Yandex DataSphere; -
??????? ??????:
???, ??? ?????? ???????? ????? ?????????? ????????? ????????? ???????? ???? Orange/KNIME; ??????? ????????? ????? ????? TensorFlow/PyTorch + ????????? ???????; -
??? ????????:
??? ??????? ?????? ??????????? spaCy/NLTK/HuggingFace Transformers; ??? ???????? – OpenCV/TensorFlow/PyTorch; ???? ?????? ????????????? – ?????????? ChatGPT/Midjourney/Stable Diffusion; -
???????
????????? ?????? ?????; ????????-???????? ????????? ????????? ? ?????? ?? ????????/??????????;
???????? ???????????? ?????, ??????? ?????? ???????? ??????? ? ????? ??.
???? ? ?????????????? ????????????? ??????????? ???????? ???????????? ???? ???? ?? ?? ?? ??????????? ?????????????? ??????? ?????? ??????! ??? ???? ???????????? ?????????? ???????:
- ?? ????????? ??????????. ???? ? ?????? ???? ???-??? ?? ????????? ??????????? – ?? ???????? ????????? ????? ?????????????? ? ?????????? ???????.
- ???????????? ?????????? ???????. ????????? ???????? ??????? ?????????? ?????????? ????? ????????? ???????? – ???????? ??? ?????? ?????????!
- ?????????????? ???????????. ???????? ???????? ???????? ????????? ???????????? ?? ??????? ????? – ?????????? ??????!
- ???????????? ? ???????. ??????? ?????????? («????», ????????-????) ????????? ??????????????, ??????? ?????? ??????? ??? ?????????? ????????!
- ??????? ?? ?????????. ??????? ?? ???????? ?????? ???????????? – ?????????? ???????? ?? ?????????? ?????????? ???????? ????????!
?????? ? ??????????? ????????????? ?????????????? ?????????? ?????????? ??????????? ??????? ??????????? ????? ?????? ???????? ????????? ?????, ?????????? ?? ???????? ? ?????????! ??????? – ??????? ??????????????? ????? ???????????? ? ???????????? ? ???? ??????… ?? ??? ????????? ???????? ?????? ? ?????????!
Recent Comments