????????? ??????????? ??? ?????? ? ????????????? ???????????

?????? ??????????? ?? ??????? ??????? ??????, ??? ?????-?????

??? 10 ??? ???? ????? ????????????? ????????? (??) ??????? ????? ?? ??????? ??????????. ??????? ??? ?????????? ????????? ???????? ? ????????????? ????????? ????? ???????????? ?????????? ? ???????????? ?????: ?? ?????-?????????? ?? ????????? ?? ????????????? ???????????? ?????????. ????? ?? ?????? ??????? ?? ???? ????? ?? ???????, ? ????? ??? ?????????, ????? ?????, ????? ???????? ????????? ?????? ??????????????? ? ?? ??????????? ?????????????. ? ?????????????? ?????? ?? ?????????????? ????? ???????????????? ? ?????????? ???????, ??????? ????? ??????? ??? ????? ?????????????, ??? ? ???????????????? ????????? ? ???? ????????? ????????.

????? ???????? ??????????????? ? ????????? ????????????? ??? ???

??? ???????????????? ??? ?????????????? ? ???????? ??????? ??????? ????????????? ??????????? ?????????, ??????????, ??????? ? ???????, ??????? ???? ??????????? ???????????, ???????, ??????????? ? ???????? ? ?????? ?????? ????????? ????????. ??? ?????? ?????? ????????, ????? ??? ???-???????? ????????? ? ??? ???????? ???????? API, ??? ? ????? ???????, ??????? ???????????? ????? ???????? ?????????? ??? ??????????????? ??????????.

???????? ???? ??????????????:

• ??????????? ????????? ???????? — ?????????? ??? ???????? ????????? ?????.
• ???????? ??????? — ??????? ??? ?????? ??????????? ?? ??? ????????????? ??????????? ??????.
• ?????????? ?????????? — ????????? ??? ???????????? ???????? ? ???????? ??????? ??? ???????????.
• ????????? ??? ??????? ?????? — ?????? ? ?????? ??? ???????????? ?????????.
• ??????????? ??????????????? ?????????? ML-???????? — AutoML-???????.

????? ?? ?????????????? ????????? ??????????? ? ???? ?????? ? ????????????? ???????????? ??????? ????????????.

????????? ????????? ????????: ???? ?????????? ??-????????

TensorFlow: ???????????? ?????????

???? ?? ???????? ????????? ??????????? — TensorFlow, ????????? Google Brain. ? ??????? ?????? ??????? ? 2015 ???? ?? ??????????? ? ??-????? ?????????? ? ??????? ????????? ????? ???????? ? ??????????? ????????? ?????????? ?????: ?? ????????????? ?????????? ?? ????????, ????? ??? ?????? ??????, ??? ????????? ????????????? ????.

???????????? TensorFlow:

• ????????? Python, ?? ???? ????, ??????????? ? ????????? ??????.
• ?????? ??????? ???????????? (TensorBoard).
• ?????????? ???????????: ????? ????????? ??? ?? ??????????? ??????????, ??? ? ?? ??????? GPU.
• ???????? ?????????? ????????????? ? ????????? ??? ????????? ????????? (????????, TensorFlow Hub).

?????? ?????????????: ???????????? ??????? ????????????? ?????????? ????? MNIST ? ??????? ????????? ?????? ???????? ????? ????????? ???????? ????? ???? ?? Python.

PyTorch: ??????? ??????????????

???? ?????????? ? ??????????? ????? ?????????????? ?????????? ? ????? ????????, ?? ??? ?????????? PyTorch, ????????????? Facebook AI Research. ????? ????????? ????????????, ??????? ??????, ?? ?????????? ?????????? ???????? ??????????? ? ???????????? ?????????????? ??????.

???????? ??????????? PyTorch:

• ????????? ??????? ????????? ??????????????? ???????????? ????????? ??????????.
• ?????????? ?????? ????????????? ?? ????? ????.
• ??????? ???????? ?????????????? ??? NLP (Natural Language Processing) ????? ?????????? HuggingFace Transformers.
• ????????? CUDA ?? ???????.

PyTorch ??????? ??????? ??? ???????????????? ????? ???? — ?????? ????????????????? ?????? ????????????? ????? ?????? ?? ???? ??????????.

Keras: ??????? ????? ??? ???????

??? ?????????, ??? ?????? ????????? ???? ??????? ? ????????????? ?????????? ??? ????????? ?????????? ?????????????? ?????? ??? ?????????? ? ??????????? ???????, ???????? ???????? ?????????? Keras. ??? ??????????? ????????? ??? TensorFlow ???? ??????????? ????????????? ????????? ????????? «?? ???????».

??? ????????? Keras:

• ?????????? ?????????.
• ?????? ???????? ??????? ????????.
• ?????? ?????????? ? TensorFlow Extended (TFX) ??? ????????-?????.

?? ????? ????? ?? 60 ????? ??????? ???? ?????? ?????? ????????????? ??????????? ??? ??????.

???????? ?????????: ????? ???????? ????????????? ?????????????

??????? ????????????? ??????? ???? ?????? ??? ????? ??????? ????????? GPU — ???????? ?????????, ????? ??? ?????? ??????, ????????????? ??????????? ????????? ??????? ??-?????? ?? ????????? ??????.

Google Cloud Artificial Intelligence Platform

????????? Google ???????????? ???????? ?????? ???????: ?? AutoML ?? Vertex AI. ??? ????? ?????????????? ???????? ?? ?????? ?????? ??? ???????????? ???????????? ????? Google Vision API, Natural Language API ? ??????.

????: ??????????? ??????.?????? ?????????? Google Cloud Vision API ??? ?????????????? ????????????? ??????? ?? ????????????.

Microsoft Cloud Machine Education

Azure ML — ??? ??????? ?? Microsoft ? ??????????? Jupyter Notebook ????? ? ???-????????????. ? ???? ????? ???? ??????????? ???????????? ???????????? ? ??????????? AutoML ??? ????????? ??????? MLOps ??? ??????? ????????????? ?????.

?????????????? Azure ML:

• ?????????? ? Power BI ??? ????????????? ??????.
• ?????? ????????? ????????? ???????? (CPU/GPU/TPU).
• ??????? ?????? ??????? ? ????????????? ???????.

Yandex DataSphere

?????????? ????? ?????????? ???????? — Yandex DataSphere. ????????? ????????????? ?? ????????????? ?????????????: ???????????? ?????????????? ? ???????? ??????????, ?????????? GPU ?? ?????????? ? ????????????? ? ??????????? ??????? (DataLens, Object Storage).

?????????? ??????: DataSphere ??????? ??????????????? ??????????? ?????? ??? ???????? ????????? ?????????? ??????? ???????????? ??????.

?????????? ?????: ????? ???????????????? ?? ?????????

?? ?????? ????? ????????????? ??? ??? ??????????? ? ??????? ????????? ??????????. ??? ??????????? ???????, ? ???????, ??????, ????????? ????????? ????????? ???????? ???????? ?????????????? ??????????.

KNIME Analytics Framework

KNIME — ??????? open-source ????????? ????????? ?????? ? ???????????? ???????????? ???????? ?????????? ??????????? ??????????. ??? ???????????? ???????? ?????? ?? ????????? ?????????? (Excel, ???? ??????), ?????? ?????????, ?????????? ??????? ?? ?????? ?????????? ??????????????.

????? KNIME:

• ??????? ??????? ???????????.
• ?????????? ? Python/R/Jupyter.
• ??????????? ?????????? ???????????? ????? ??????.

KNIME ????????? ????? ????????? ?? ???????????? ? ???????????? ?? ???? ???????? ?????? ? ????????? ????????? ????????????????? ??????.

Orange Data Digging

????????? — ??? ???? ?? ?????????? ???????????? ?????????? ??????? ??????????????????? ????????. ?? ????? ???????? ????? ????????? ???????? ???????? ?????????? ??? ??????? ????????????????. Orange ????????? ????????? ??????????? ?????????????????? ??????????? ?????? ??????????? ????????: ????????? ???????? → ??????????????? ????????? → ???????? ?????? → ????????????? ???????????.

???????? ???????: Orange ????? ????????? ??? ?????????? ? ????????????? ?? ????????? ?????? ????? ????????? ?????? ????????? ????, ??? ?????? ?????? ?????????? ?????? ????? ?????.

??????????? ????????? ? ????????? ????????

????? ??? ??? ???????????? ?????? ????????????? ????????? ???? ??? ????? ????????? ?????????????? ??????????, ?? ????? ????????? ???????????: ??????? ???? ?? ?? ?????, ???????? ? ??????? ???????, ?????????? ????????. ?? ???? ????? ???????????? ?????????? ?????? ?????????? ? ???????, ????? ?????? ??????.

Pandas: ??????????? ??? ?????????

?????????? ?????? ?? ????? ??? ???????? ???????? ??-????? ????? ????-??????????? ?? ???? ????. ??? ????????????? ??????????? ???????????? ? ????????? ??????????? ??? ?? ?????????, ??? ? Excel ??? Google Sheets — ?????? ??????? ??????????? ? ? ??????? ?????????!

????? ??????????? ????????????? Pandas:

• ??????/??????? ??????? CSV/XLSX-??????/??????? SQL/??????? JSON ??????;
• ??????? ?????????? ?????/???????.
• ????????????? ??????;
• ?????????? ??????;
• ???????????? ?????????? ?????? (pivot tables).

Pandas ????? ??????????? ?????? ? Matplotlib ???? Seaborn ??? ????????????? ??????????????? ????????????? ????? ????????? ?? ???????.

OpenCV: ??????????? ??????????? ?? ????

???? ???? ??????????? ?????? ????? ????????? ? ???????? ??????????? ??? ???????????? (????????, ??????????? ???), ??? ?????????? OpenCV — ??????? ?????????? ????????? ??????. ??? ???????????? ??????? ?????????? ????????? ???????????: ?? ???????????? ???????? ?? ??????????????? ???????? ???? YOLOv5 ??? SSD MobileNet.

OpenCV ?????? ?????????? ? ??????????? TensorFlow / PyTorch ????? ????????? NumPy. ????????, ????????? ?????????? ?????????? ??????????? ????????? ?????? OpenCV + ?????? ? PyTorch ??? ?????????? ??????????? ?? ?????????? ??? ???????????????? ????????????.

NLTK ?????????? & spaCy: ??????????? ???????????? ??????????

??? ????????? ? ????????? ??????????? ???? ????????? ????? ??????????????? — ?????? NLP (Natural Language Processing). ????? ???? ?????????? NLTK (Natural Language Toolkit) ? spaCy:

Natural Language Toolkit is a powerful resource for handling linguistic data. It provides user-friendly interfaces to over 50 corpora and lexical resources.

• ???????? ???????? ??? ?????????? ???????? ??????????? ???????????;
• ???????? ????????? ???????? ????????;
• ????????? ????????? ????????? ?? ??????, ???????? ? ?????? ?????, ??????? ????.

spaCy

• ????????? ??? ???????????? ????? ???????????? ??????;
• ??????????? ????????? ????????? ?????????? ?????;
• ???? ??????? ????????? ??????? ???????? ??????.

? ?????????? ????????? ??? ?????????? ?????????? ????? ??? ?????? ?????? ???????????? ???? ??????????? ?????? ?? ???????? ?????, ????????? ????? ???????????, ??? ?????? ??????, ? ????????.

????????????? ????????? ???????? ????????: AutoML-????????? ?????? ?????????

? ?????? ?????????????????? ?? ???????? ??????????? ??????????? ???????? ????????? ?????????? ???????? ??? ????????? ??????? ???????????? ?? data science. ?? ??????? ?????? ??????? AutoML (Automated Machine Learning), ??????? ????????? ??????????? ??????????? ????????? ??????? ??? ?????????? ?????? ????????????.

Google Automated Machine Learning & Vertex AI

Google ????? ?? ?????? ???????? ???????????? ?????? AutoML ??? ???? ??? ???? ?????. ?? ??????????? ???? ?? ??????? ? ????? Vertex AI ? ???????????? ??????????? ??????????? ?????? ????????????? ????????/???????, ???? ??? ?????????????, ??? ?? ?????? ? Python!

????? ??????? ??? ?????????:

1. ?????????? ???? ?????? ????? ????????-?????????;
2. ??????? ?????? (??? ???????, ?????????? ?????????);
3. ?????? ??? ????????? ????? ???????;
4. ????????? ??????????? ?????? ?????? ? ??????? ?????????????!

????? ????? ????? ?????????????? ????? ????????? ???????? ?? ??? ????????? ?????????? ?????????? ??????? ??????? ??? ??????????? ??????? ML-????????????.

H2O.ai Driverless AI

H2O.ai ???????? ?????? ? ???????? ???????? ????? ?????????? ?? ????????? ??????? ??????? ?????? ??? ?? ?????? Hadoop-???????? ????????? ? ?????? 2010-? ?????. ?? ??????? Driverless AI ????????? ?? ?????? ???????? ??????????? ????????? ??????????????????? ???????? ??? ???????? ??????? («?????? ???????», «???????????? ????? ????????»), ?? ???? ????????? ???????? ?????? ? ???, ?????? ??????? ??????? ??? ??? ???? ?????!

???????????: Driverless AI ? ?????? ??????? ??????????????? ??????????? ??????????? ????? ??? ?????? ? ?????????????? ????? ????????????? ????????? ??????????????? ???????????? ????????????? ??????? ?????? (Explainable AI).

???????? ???????? ???????? ?? ?????? ??

? ????????? ???? ???? ?????????? ????????? ?????????? ?????? AI — ?? ????? ???????? ????? GPT ??? Stable Diffusion ???????? ??????????? ??????, ??????????? ???? ????? ??????????? «? ????». ????? ????????? ???????? ? ???? ????? ????? ??????????

ChatGPT interface

API ?? OpenAI ????????????? ??????????? ? ????? ????? ?????? ??????????????? ???????? ?????? ??????? – GPT?4o (??? ?? ????????). ??????????? ???? ???????? ???????????????? ???????????? ????????? ???????????? ????? ???? ?????? ???-???? ????????-????????, – ??? ??? ??????????? ?? ?????????!

? ?????????? ????????? ?????? digital?????????? ?????????? ChatGPT API ??? ???????? ???????? ??? ????????? ???????? ???? ???????????? SEO????????? ?? ?????????? ??????????? ???????? (? ?????? ????????? ??? ??????? ????).

Midquest & Firm Diffusion Web Interface

???????? ???????? ?????? ???????? ????! Midjourney – ??? ???- ?????? ????????? ??????????? ?? ????????? ??????????? («prompt’??»), ??????? ???????? ????????? ????????? ???????? ???? ???????????? ????????; Steady Diffusion ? ?????? ?????? – ???????? ???????????????? c ???????????? ?????? ???????? ? ???? ???? ????? WebUI-???????????????? ????????? ?? ?????????? Nvidia RTX 3060+.

?????????? ??????: ????????? ?? ?????-?????????? ?????????? ??????? ? ??????? ????????????? ????????? ????? Stable Diffusion WebUI – ??????? ???????? ? ??????? ????????????????? ????????????!

???????????? ???????? ????????????? ?????????? ?? ? ?????????? ????????? ???????

????? ?????? ???????? ???? ???? ??????? ?? ?????? «?? ??????», ??????? ?????? ???????? ???????? ????????????? ???????????? ?????????????? ?????????? ? ??? ? ??????:

1. ????????
   ????????? ???????? Vision API/Stable Diffusion ??? ????????????? ????????? ?? ???? ???????????; ??????????? ?????????? ???????? ?? ???? GPT?4o ????? OpenAI API; ????????? ???????? ?????????? ??????????? spaCy/NLTK;

2. ????????
   ??????????????? ????????????????? ?????? ????????????? ??????? ????????? ??????? ???????? ????????????????? ?????? ????? KNIME; ??????????? ???? ???????? ????????????? TensorFlow/PyTorch;

3. ???????
   ??????????? ?????????? ????????? OpenCV/TensorFlow ?? ????? ????????? ??????????? ???; ?????????? NLP-?????????? ???????????? ????????????? ??????? ??????? ???????;

4. ????????????
   ???????? ????? ??????????? H2O.ai Driverless AI ??? ?????? ? ??????; Azure ML ????????????? ??? ??????????????? ???????? ????;

5. ???????????? ???????
   ????????? ???????? ????????? ?????????? ????? ?????? SpeechKit; ?????? ??????? ???????????? ?????? ?????????????? ????????????? Pandas/OpenCV;

????? ??????? ??????? ?????? ??????????

??????? ??????? ????? ??-?? ????????? ?????????????:

1. ???? ???????:
   ???? ??? ????? ?????????? ?????? ???????? ??????? – ?????? Keras/PyTorch + Colab/Jupyter; ???? ????? ?????????? ????????????? – ??????????? ??????? ? Vertex AI/Azure ML/Yandex DataSphere;

2. ?????? ?????????:
   ???, ??? ?????? ???????? ??????? ?????????? c ??????????? ???????????? ????? Orange/KNIME; ??????? ????????? ????? ????? TensorFlow/PyTorch + ????????? ???????;

3. ??? ???????:
   ??? ??????? ??????? ??????????? spaCy/NLTK/HuggingFace ????????????; ??? ???????? – OpenCV/TensorFlow/PyTorch; ???? ?????? ????????????? – ??????????? ChatGPT/Midjourney/Stable Diffusion;

4. ??????
   ????????? ?????? ????????????; ???-???????? ????????? ??????? ????? ?? ?????????/???????;

?????????? ?????? ???, ???-?? ???? ???????? ??????? ? ??-?????????.

???? ? ?? ???????? ??????? ????? ???? ?? ??? ???, ???? ?? ?? ?????????? ???? ??????? ?????? ??????! ??? ???? ???????????? ???????? ?????????:

1. ?? ????????? ??????????. ?????? ???? ???-?? ?? ????????? ?????????? – ?? ??????????? ?????????? ???????? ?????????????? ? ?????????? ???????.
2. ?????????? ??????? ???????. ??????????? ????????-???????? ??????? ????????????? ????????????? ????? ????????? ???????? – ???????? ??? ?????? ?????????!
3. ???????? ????????????. ?????????? ??????????? ???????? ?????????????? ??????????? ?? ??????? ????? – ????????? ??????!
4. ???????????? ? ???????????. ??????? ?????????? («????», ????????-????) ????????? ????????????, ???????? ?????????? ????????????? ??? ?????????? ????????!
5. ???????????? ?? ?????????. ??? ?????????????? ?????????? ?????????? ?????? ?????? – ?????????? ???????? ?? ?????????????????? ???????? ???????? ????????!

?????? ? ????????? ?????????? ????????? ?????? ????????????? ?????????? ???????? ??????????? ??? ????, ??? ????? ????????? ?????, ?????????? ?? ???????? ? ?????????! ????? ?????? – ?????????? ?????????? ????? ?????? ??? ???? ??????… ? ????????? ?????? ?????? ? ?????????!