PYTHONL Telegram 4496
Forwarded from Machinelearning
πŸ“ŒΠ’ΠΎΠΏ Python-ΠΏΡ€ΠΎΠ΅ΠΊΡ‚ΠΎΠ² для ML 2024 Π³ΠΎΠ΄Π°.

Π­Ρ‚ΠΈ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚Ρ‹ Π±Ρ‹Π»ΠΈ Π²Ρ‹Π±Ρ€Π°Π½Ρ‹ Π½Π° основС ΠΈΡ… Π°ΠΊΡ‚ΡƒΠ°Π»ΡŒΠ½ΠΎΡΡ‚ΠΈ Π½Π° 2024 Π³ΠΎΠ΄. ΠšΠ°ΠΆΠ΄Ρ‹ΠΉ ΠΈΠ· Π½ΠΈΡ… - смСсь практичСской полСзности, Π½ΠΎΠ²ΠΈΠ·Π½Ρ‹ ΠΈ, чСстно говоря, крутости, Π±ΡƒΠ΄ΡŒ Ρ‚ΠΎ смСлый ΠΈ ΠΈΠ½Π½ΠΎΠ²Π°Ρ†ΠΈΠΎΠ½Π½Ρ‹ΠΉ ΠΏΠΎΠ΄Ρ…ΠΎΠ΄, элСгантноС Ρ€Π΅ΡˆΠ΅Π½ΠΈΠ΅ слоТных ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌ ΠΈΠ»ΠΈ просто умная рСализация.

🟒BAML - ΠΏΡ€Π΅Π΄ΠΌΠ΅Ρ‚Π½ΠΎ-ΠΎΡ€ΠΈΠ΅Π½Ρ‚ΠΈΡ€ΠΎΠ²Π°Π½Π½Ρ‹ΠΉ язык для Ρ€Π°Π±ΠΎΡ‚Ρ‹ с LLM.

BAML ΠΏΡ€Π΅Π²Ρ€Π°Ρ‰Π°Π΅Ρ‚ тСкстовыС ΠΏΡ€ΠΎΠΌΠΏΡ‚Ρ‹ Π² ΠΌΠ½ΠΎΠ³ΠΎΠΊΡ€Π°Ρ‚Π½ΠΎ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΠ΅ΠΌΡ‹Π΅ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ LLM с Ρ‚ΠΈΠΏΠΈΠ·ΠΈΡ€ΠΎΠ²Π°Π½Π½Ρ‹ΠΌΠΈ ΠΏΠ΅Ρ€Π΅ΠΌΠ΅Π½Π½Ρ‹ΠΌΠΈ ΠΈ ΠΎΠ±Π΅ΡΠΏΠ΅Ρ‡ΠΈΠ²Π°ΡŽΡ‚ ΠΊΠΎΠ½ΠΊΡ€Π΅Ρ‚Π½Ρ‹ΠΉ Ρ‚ΠΈΠΏ Π²Ρ‹Ρ…ΠΎΠ΄Π½Ρ‹Ρ… Π΄Π°Π½Π½Ρ‹Ρ…. BAML прСвосходит Π΄Ρ€ΡƒΠ³ΠΈΠ΅ ΠΌΠ΅Ρ‚ΠΎΠ΄Ρ‹ получСния структурированных Π΄Π°Π½Π½Ρ‹Ρ… ΠΎΡ‚ LLM ΠΈ ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ VS Code ΠΈ Cursor.

🟒marimo - Python notebooks Π³Π΅ΠΉΠΌΡ‡Π΅ΠΉΠ΄ΠΆΠ΅Ρ€.

Новый ΠΏΠΎΠ΄Ρ…ΠΎΠ΄ ΠΊ notebook, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΉ ΠΏΡ€Π΅Π²Ρ€Π°Ρ‰Π°Π΅Ρ‚ ΠΈΡ… Π² ΠΌΠΎΡ‰Π½ΡƒΡŽ, Ρ€Π΅Π°ΠΊΡ‚ΠΈΠ²Π½ΡƒΡŽ срСду для создания ΡƒΠ΄ΠΎΠ±Π½Ρ‹Ρ… для совмСстного использования Ρ€Π°Π±ΠΎΡ‡ΠΈΡ… процСссов. Marimo Π³ΠΎΡ‚ΠΎΠ² Π·Π°ΠΌΠ΅Π½ΠΈΡ‚ΡŒ Jupyter ΠΈ Streamlit, устраняя ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹ скрытого состояния ΠΈ Ρ€ΡƒΡ‡Π½ΠΎΠ³ΠΎ выполнСния ячССк.

🟒OpenHands - ΠΌΠΎΡ‰Π½Ρ‹ΠΉ Π°Π³Π΅Π½Ρ‚ для Ρ€Π°Π·Ρ€Π°Π±ΠΎΡ‚ΠΊΠΈ.

БСзопасная изолированная срСда, Π³Π΄Π΅ AI-Π°Π³Π΅Π½Ρ‚Ρ‹ ΠΌΠΎΠ³ΡƒΡ‚ Π²Ρ‹ΠΏΠΎΠ»Π½ΡΡ‚ΡŒ ΠΊΠΎΠ΄, Π²Π·Π°ΠΈΠΌΠΎΠ΄Π΅ΠΉΡΡ‚Π²ΠΎΠ²Π°Ρ‚ΡŒ с Π²Π΅Π±-Π±Ρ€Π°ΡƒΠ·Π΅Ρ€Π°ΠΌΠΈ, ΡƒΠΏΡ€Π°Π²Π»ΡΡ‚ΡŒ Ρ„Π°ΠΉΠ»Π°ΠΌΠΈ, ΠΎΡ‚Π»Π°ΠΆΠΈΠ²Π°Ρ‚ΡŒ ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹, Ρ€Π΅Ρ„Π°ΠΊΡ‚ΠΎΡ€ΠΈΡ‚ΡŒ ΠΊΠΎΠ΄ ΠΈ Π΄Π°ΠΆΠ΅ ΡΠΎΡ‚Ρ€ΡƒΠ΄Π½ΠΈΡ‡Π°Ρ‚ΡŒ с Π΄Ρ€ΡƒΠ³ΠΈΠΌΠΈ Π°Π³Π΅Π½Ρ‚Π°ΠΌΠΈ. Π‘Ρ€Π΅Π΄Π° Π²ΠΊΠ»ΡŽΡ‡Π°Π΅Ρ‚ Π² сСбя Docker-пСсочницу с доступом ΠΊ bash-ΠΎΠ±ΠΎΠ»ΠΎΡ‡ΠΊΠ΅, Π²Π΅Π±-Π±Ρ€Π°ΡƒΠ·ΠΈΠ½Π³ΠΎΠΌ ΠΈ IPython-сСрвСром.

🟒Crawl4AI - ΠΈΠ½Ρ‚Π΅Π»Π»Π΅ΠΊΡ‚ΡƒΠ°Π»ΡŒΠ½Ρ‹ΠΉ Π²Π΅Π±-скрапинг.

Π‘ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊΠ°, которая ΠΎΠ±Ρ€Π°Π±Π°Ρ‚Ρ‹Π²Π°Π΅Ρ‚ динамичСский ΠΊΠΎΠ½Ρ‚Π΅Π½Ρ‚, ΠΎΠ±Ρ…ΠΎΠ΄ΠΈΡ‚ ΠΌΠ΅Ρ…Π°Π½ΠΈΠ·ΠΌΡ‹ Π·Π°Ρ‰ΠΈΡ‚Ρ‹ ΠΎΡ‚ Π±ΠΎΡ‚ΠΎΠ², ΠΈΠ·Π²Π»Π΅ΠΊΠ°Π΅Ρ‚ структурированныС Π΄Π°Π½Π½Ρ‹Π΅ ΠΈ ΠΌΠ°ΡΡˆΡ‚Π°Π±ΠΈΡ€ΡƒΠ΅Ρ‚ Π·Π°Π΄Π°Ρ‡ΠΈ сбора массивов ΠΈΠ½Ρ„ΠΎΡ€ΠΌΠ°Ρ†ΠΈΠΈ. Асинхронная Π°Ρ€Ρ…ΠΈΡ‚Π΅ΠΊΡ‚ΡƒΡ€Π° Π΄Π°Π΅Ρ‚ Π²Ρ‹ΡΠΎΠΊΡƒΡŽ ΡΠΊΠΎΡ€ΠΎΡΡ‚ΡŒ Ρ€Π°Π±ΠΎΡ‚Ρ‹ Π΄Π°ΠΆΠ΅ со слоТным JavaScript. На Π²Ρ‹Ρ…ΠΎΠ΄Π΅ - Ρ„ΠΎΡ€ΠΌΠ°Ρ‚Ρ‹ JSON, markdown ΠΈ ΠΎΡ‡ΠΈΡ‰Π΅Π½Π½Ρ‹ΠΉ HTML, Π³ΠΎΡ‚ΠΎΠ²Ρ‹Π΅ для ΠΈΠΌΠΏΠΎΡ€Ρ‚Π° Π² LLM. Crawl4AI ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ Chromium, Firefox ΠΈ WebKit Ρ‡Π΅Ρ€Π΅Π· Playwright.

🟒LitServe - ΡƒΠ½ΠΈΠ²Π΅Ρ€ΡΠ°Π»ΡŒΠ½Ρ‹ΠΉ Π΄Π²ΠΈΠΆΠΎΠΊ для развСртывания ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ.

Π”Π΅Ρ‚ΠΈΡ‰Π΅ LightningAI - ΠΌΠΎΡ‰Π½Ρ‹ΠΉ инструмСнт для развСртывания ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ ΠΈ слоТных AI-ΠΊΠΎΠ½Π²Π΅ΠΉΠ΅Ρ€ΠΎΠ². ΠŸΠΎΡΡ‚Ρ€ΠΎΠ΅Π½ Π½Π° Π±Π°Π·Π΅ FastAPI, ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ PyTorch, TensorFlow, JAX ΠΈ Ρ€Π°Π±ΠΎΡ‚Π°Π΅Ρ‚ с GenAI, Π‘V, ASR ΠΈ эмбСдингами. LitServe ΡƒΠΌΠ΅Π΅Ρ‚ Π² KV-ΠΊΡΡˆΠΈΡ€ΠΎΠ²Π°Π½ΠΈΠ΅ для LLM, ΠΈ ΠΏΠΎΠ΄Ρ…ΠΎΠ΄ΠΈΡ‚ ΠΊΠ°ΠΊ для Π»Π΅Π³ΠΊΠΈΡ… ΠΏΡ€ΠΈΠ»ΠΎΠΆΠ΅Π½ΠΈΠΉ, Ρ‚Π°ΠΊ ΠΈ для тяТСлых ΠΊΠΎΡ€ΠΏΠΎΡ€Π°Ρ‚ΠΈΠ²Π½Ρ‹Ρ… Π½Π°Π³Ρ€ΡƒΠ·ΠΎΠΊ.

🟒Mirascope - ΡƒΠ½ΠΈΡ„ΠΈΡ†ΠΈΡ€ΠΎΠ²Π°Π½Π½Ρ‹ΠΉ интСрфСйс LLM.

Python-инструмСнт для упрощСния извлСчСния структурированных Π΄Π°Π½Π½Ρ‹Ρ… ΠΈΠ· LLM. Он ΠΏΡ€Π΅Π΄Π»Π°Π³Π°Π΅Ρ‚ ΡƒΠ΄ΠΎΠ±Π½Ρ‹ΠΉ интСрфСйс, основанный Π½Π° Π΄Π΅ΠΊΠΎΡ€Π°Ρ‚ΠΎΡ€Π°Ρ… ΠΈ Π΄Π΅ΠΊΠ»Π°Ρ€Π°Ρ‚ΠΈΠ²Π½Ρ‹Ρ… схСмах. Mirascope ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ OpenAI, Anthropic ΠΈ Cohere ΠΈ ΠΈΠΌΠ΅Π΅Ρ‚ свой поисковый Π°Π³Π΅Π½Ρ‚ WebSearchAgent, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΉ ΠΌΠΎΠΆΠ΅Ρ‚ Π°Π²Ρ‚ΠΎΠ½ΠΎΠΌΠ½ΠΎ ΡΠΎΠ±ΠΈΡ€Π°Ρ‚ΡŒ ΠΈΠ½Ρ„ΠΎΡ€ΠΌΠ°Ρ†ΠΈΡŽ ΠΈΠ· ΠΈΠ½Ρ‚Π΅Ρ€Π½Π΅Ρ‚Π°.

🟒Surya - OCR с высокой Ρ‚ΠΎΡ‡Π½ΠΎΡΡ‚ΡŒΡŽ.

OCR-систСма Π½Π° 90 языках. Surya ΠΈΠ·Π²Π»Π΅ΠΊΠ°Π΅Ρ‚ тСкст ΠΈΠ· сканированных ΠΈΠ·ΠΎΠ±Ρ€Π°ΠΆΠ΅Π½ΠΈΠΉ, PDF-Ρ„Π°ΠΉΠ»ΠΎΠ² ΠΈ Π΄Ρ€ΡƒΠ³ΠΈΡ… Π²ΠΈΠ·ΡƒΠ°Π»ΡŒΠ½Ρ‹Ρ… Ρ„ΠΎΡ€ΠΌΠ°Ρ‚ΠΎΠ² с Ρ‚ΠΎΡ‡Π½ΠΎΡΡ‚ΡŒΡŽ, сравнимой с Google Cloud Vision. Помимо OCR, Surya ΠΏΡ€ΠΎΠ²ΠΎΠ΄ΠΈΡ‚ Ρ€Π°ΡΡˆΠΈΡ€Π΅Π½Π½Ρ‹ΠΉ Π°Π½Π°Π»ΠΈΠ· Π΄ΠΎΠΊΡƒΠΌΠ΅Π½Ρ‚Π°, опрСдСляя Π·Π°Π³ΠΎΠ»ΠΎΠ²ΠΊΠΈ, изобраТСния, Ρ‚Π°Π±Π»ΠΈΡ†Ρ‹ ΠΈ порядок чтСния, Ρ‡Ρ‚ΠΎ идСально для ΠΎΡ†ΠΈΡ„Ρ€ΠΎΠ²ΠΊΠΈ ΠΊΠ½ΠΈΠ³, Ρ„ΠΎΡ€ΠΌ ΠΈ Π½Π°ΡƒΡ‡Π½Ρ‹Ρ… Π΄ΠΎΠΊΡƒΠΌΠ΅Π½Ρ‚ΠΎΠ².

🟒DataChain - ΠΊΠΎΠ½Π²Π΅ΠΉΠ΅Ρ€ Π΄Π°Π½Π½Ρ‹Ρ… для ИИ.

ΠŸΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΠ° для управлСния вСрсиями ΠΌΡƒΠ»ΡŒΡ‚ΠΈΠΌΠΎΠ΄Π°Π»ΡŒΠ½Ρ‹Ρ… Π½Π°Π±ΠΎΡ€ΠΎΠ² ΠΈΠ·ΠΎΠ±Ρ€Π°ΠΆΠ΅Π½ΠΈΠΉ, Π²ΠΈΠ΄Π΅ΠΎ, тСкста ΠΈ PDF-Ρ„Π°ΠΉΠ»ΠΎΠ². Π‘ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊΠ° ΠΏΡ€Π΅ΠΎΠ±Ρ€Π°Π·ΡƒΠ΅Ρ‚ Ρ€Π°Π·Ρ€ΠΎΠ·Π½Π΅Π½Π½Ρ‹Π΅ Ρ„Π°ΠΉΠ»Ρ‹ Π² Ρ†Π΅Π½Ρ‚Ρ€Π°Π»ΠΈΠ·ΠΎΠ²Π°Π½Π½Ρ‹Π΅ датасСты, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ Π»Π΅Π³ΠΊΠΎ Π·Π°ΠΏΡ€Π°ΡˆΠΈΠ²Π°Ρ‚ΡŒ ΠΈ ΠΌΠ°Π½ΠΈΠΏΡƒΠ»ΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ с ΠΏΠΎΠΌΠΎΡ‰ΡŒΡŽ Python Π±Π΅Π· использования Spark ΠΈΠ»ΠΈ SQL. DataChain ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ PyTorch, TensorFlow, AI-Π³Π΅Π½Π΅Ρ€Π°Ρ†ΠΈΡŽ ΠΌΠ΅Ρ‚Π°Π΄Π°Π½Π½Ρ‹Ρ…, ΡΠ΅Ρ€ΠΈΠ°Π»ΠΈΠ·Π°Ρ†ΠΈΡŽ инфСрСнса LLM ΠΈ Π²Ρ‹ΠΏΠΎΠ»Π½Π΅Π½ΠΈΠ΅ ΠΏΠ°ΠΊΠ΅Ρ‚Π½Ρ‹Ρ… ΠΏΡ€ΠΎΡ†Π΅Π΄ΡƒΡ€.

🟒Narwhals - ΡƒΠ½ΠΈΠ²Π΅Ρ€ΡΠ°Π»ΡŒΠ½Ρ‹ΠΉ слой совмСстимости для DataFrame-Π±ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊ.

ЛСгковСсный слой, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΉ ΠΎΠ±ΡŠΠ΅Π΄ΠΈΠ½ΡΠ΅Ρ‚ pandas, Polars, PyArrow, Modin ΠΈ cuDF Π² Python. Он позволяСт ΠΏΠΈΡΠ°Ρ‚ΡŒ ΠΊΠΎΠ΄, Π½Π΅ зависящий ΠΎΡ‚ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΠ΅ΠΌΠΎΠ³ΠΎ бэкСнда, ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΡ подмноТСство API Polars Π² качСствС интСрфСйса. ΠŸΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ ΠΊΠ°ΠΊ eager, Ρ‚Π°ΠΊ ΠΈ lazy execution стили, Π²ΠΊΠ»ΡŽΡ‡Π°Ρ Dask. Narwhals Π½Π΅ ΠΈΠΌΠ΅Π΅Ρ‚ зависимостСй ΠΈ обСспСчиваСт ΡΡ‚Π°Ρ‚ΠΈΡ‡Π΅ΡΠΊΡƒΡŽ Ρ‚ΠΈΠΏΠΈΠ·Π°Ρ†ΠΈΡŽ для Π°Π²Ρ‚ΠΎΠ·Π°Π²Π΅Ρ€ΡˆΠ΅Π½ΠΈΡ ΠΈ подсказок Π² IDE.

🟒PydanticAI - Ρ„Ρ€Π΅ΠΉΠΌΠ²ΠΎΡ€ΠΊ для Ρ€Π°Π·Ρ€Π°Π±ΠΎΡ‚ΠΊΠΈ AI-ΠΏΡ€ΠΈΠ»ΠΎΠΆΠ΅Π½ΠΈΠΉ.

Π€Ρ€Π΅ΠΉΠΌΠ²ΠΎΡ€ΠΊ Π°Π³Π΅Π½Ρ‚ΠΎΠ², ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ ΡƒΠΏΡ€Π°Π²Π»ΡΡŽΡ‚ взаимодСйствиСм с LLM ΠΈ ΠΏΡ€ΠΎΠ²Π΅Ρ€ΠΊΠΎΠΉ ΠΈΡ… инфСрСнса. Π˜ΠΌΠ΅Π΅Ρ‚ систСму внСдрСния зависимостСй, ΠΏΠΎΠ·Π²ΠΎΠ»ΡΡŽΡ‰ΡƒΡŽ динамичСски ΠΏΠΎΠ»ΡƒΡ‡Π°Ρ‚ΡŒ контСкстныС Π΄Π°Π½Π½Ρ‹Π΅. PydanticAI ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ ΠΏΠΎΠ»ΡŒΠ·ΠΎΠ²Π°Ρ‚Π΅Π»ΡŒΡΠΊΠΈΠ΅ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ Python, Π²Ρ‹Π·Ρ‹Π²Π°Π΅ΠΌΡ‹Π΅ Π°Π³Π΅Π½Ρ‚Π°ΠΌΠΈ для доступа ΠΊ ΠΈΠ½Ρ„ΠΎΡ€ΠΌΠ°Ρ†ΠΈΠΈ ΠΈ выполнСния вычислСний.


@ai_machinelearning_big_data
Please open Telegram to view this post
VIEW IN TELEGRAM
πŸ‘15❀8πŸ”₯7😁1



tgoop.com/pythonl/4496
Create:
Last Update:

πŸ“ŒΠ’ΠΎΠΏ Python-ΠΏΡ€ΠΎΠ΅ΠΊΡ‚ΠΎΠ² для ML 2024 Π³ΠΎΠ΄Π°.

Π­Ρ‚ΠΈ ΠΏΡ€ΠΎΠ΅ΠΊΡ‚Ρ‹ Π±Ρ‹Π»ΠΈ Π²Ρ‹Π±Ρ€Π°Π½Ρ‹ Π½Π° основС ΠΈΡ… Π°ΠΊΡ‚ΡƒΠ°Π»ΡŒΠ½ΠΎΡΡ‚ΠΈ Π½Π° 2024 Π³ΠΎΠ΄. ΠšΠ°ΠΆΠ΄Ρ‹ΠΉ ΠΈΠ· Π½ΠΈΡ… - смСсь практичСской полСзности, Π½ΠΎΠ²ΠΈΠ·Π½Ρ‹ ΠΈ, чСстно говоря, крутости, Π±ΡƒΠ΄ΡŒ Ρ‚ΠΎ смСлый ΠΈ ΠΈΠ½Π½ΠΎΠ²Π°Ρ†ΠΈΠΎΠ½Π½Ρ‹ΠΉ ΠΏΠΎΠ΄Ρ…ΠΎΠ΄, элСгантноС Ρ€Π΅ΡˆΠ΅Π½ΠΈΠ΅ слоТных ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌ ΠΈΠ»ΠΈ просто умная рСализация.

🟒BAML - ΠΏΡ€Π΅Π΄ΠΌΠ΅Ρ‚Π½ΠΎ-ΠΎΡ€ΠΈΠ΅Π½Ρ‚ΠΈΡ€ΠΎΠ²Π°Π½Π½Ρ‹ΠΉ язык для Ρ€Π°Π±ΠΎΡ‚Ρ‹ с LLM.

BAML ΠΏΡ€Π΅Π²Ρ€Π°Ρ‰Π°Π΅Ρ‚ тСкстовыС ΠΏΡ€ΠΎΠΌΠΏΡ‚Ρ‹ Π² ΠΌΠ½ΠΎΠ³ΠΎΠΊΡ€Π°Ρ‚Π½ΠΎ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΠ΅ΠΌΡ‹Π΅ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ LLM с Ρ‚ΠΈΠΏΠΈΠ·ΠΈΡ€ΠΎΠ²Π°Π½Π½Ρ‹ΠΌΠΈ ΠΏΠ΅Ρ€Π΅ΠΌΠ΅Π½Π½Ρ‹ΠΌΠΈ ΠΈ ΠΎΠ±Π΅ΡΠΏΠ΅Ρ‡ΠΈΠ²Π°ΡŽΡ‚ ΠΊΠΎΠ½ΠΊΡ€Π΅Ρ‚Π½Ρ‹ΠΉ Ρ‚ΠΈΠΏ Π²Ρ‹Ρ…ΠΎΠ΄Π½Ρ‹Ρ… Π΄Π°Π½Π½Ρ‹Ρ…. BAML прСвосходит Π΄Ρ€ΡƒΠ³ΠΈΠ΅ ΠΌΠ΅Ρ‚ΠΎΠ΄Ρ‹ получСния структурированных Π΄Π°Π½Π½Ρ‹Ρ… ΠΎΡ‚ LLM ΠΈ ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ VS Code ΠΈ Cursor.

🟒marimo - Python notebooks Π³Π΅ΠΉΠΌΡ‡Π΅ΠΉΠ΄ΠΆΠ΅Ρ€.

Новый ΠΏΠΎΠ΄Ρ…ΠΎΠ΄ ΠΊ notebook, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΉ ΠΏΡ€Π΅Π²Ρ€Π°Ρ‰Π°Π΅Ρ‚ ΠΈΡ… Π² ΠΌΠΎΡ‰Π½ΡƒΡŽ, Ρ€Π΅Π°ΠΊΡ‚ΠΈΠ²Π½ΡƒΡŽ срСду для создания ΡƒΠ΄ΠΎΠ±Π½Ρ‹Ρ… для совмСстного использования Ρ€Π°Π±ΠΎΡ‡ΠΈΡ… процСссов. Marimo Π³ΠΎΡ‚ΠΎΠ² Π·Π°ΠΌΠ΅Π½ΠΈΡ‚ΡŒ Jupyter ΠΈ Streamlit, устраняя ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹ скрытого состояния ΠΈ Ρ€ΡƒΡ‡Π½ΠΎΠ³ΠΎ выполнСния ячССк.

🟒OpenHands - ΠΌΠΎΡ‰Π½Ρ‹ΠΉ Π°Π³Π΅Π½Ρ‚ для Ρ€Π°Π·Ρ€Π°Π±ΠΎΡ‚ΠΊΠΈ.

БСзопасная изолированная срСда, Π³Π΄Π΅ AI-Π°Π³Π΅Π½Ρ‚Ρ‹ ΠΌΠΎΠ³ΡƒΡ‚ Π²Ρ‹ΠΏΠΎΠ»Π½ΡΡ‚ΡŒ ΠΊΠΎΠ΄, Π²Π·Π°ΠΈΠΌΠΎΠ΄Π΅ΠΉΡΡ‚Π²ΠΎΠ²Π°Ρ‚ΡŒ с Π²Π΅Π±-Π±Ρ€Π°ΡƒΠ·Π΅Ρ€Π°ΠΌΠΈ, ΡƒΠΏΡ€Π°Π²Π»ΡΡ‚ΡŒ Ρ„Π°ΠΉΠ»Π°ΠΌΠΈ, ΠΎΡ‚Π»Π°ΠΆΠΈΠ²Π°Ρ‚ΡŒ ΠΏΡ€ΠΎΠ±Π»Π΅ΠΌΡ‹, Ρ€Π΅Ρ„Π°ΠΊΡ‚ΠΎΡ€ΠΈΡ‚ΡŒ ΠΊΠΎΠ΄ ΠΈ Π΄Π°ΠΆΠ΅ ΡΠΎΡ‚Ρ€ΡƒΠ΄Π½ΠΈΡ‡Π°Ρ‚ΡŒ с Π΄Ρ€ΡƒΠ³ΠΈΠΌΠΈ Π°Π³Π΅Π½Ρ‚Π°ΠΌΠΈ. Π‘Ρ€Π΅Π΄Π° Π²ΠΊΠ»ΡŽΡ‡Π°Π΅Ρ‚ Π² сСбя Docker-пСсочницу с доступом ΠΊ bash-ΠΎΠ±ΠΎΠ»ΠΎΡ‡ΠΊΠ΅, Π²Π΅Π±-Π±Ρ€Π°ΡƒΠ·ΠΈΠ½Π³ΠΎΠΌ ΠΈ IPython-сСрвСром.

🟒Crawl4AI - ΠΈΠ½Ρ‚Π΅Π»Π»Π΅ΠΊΡ‚ΡƒΠ°Π»ΡŒΠ½Ρ‹ΠΉ Π²Π΅Π±-скрапинг.

Π‘ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊΠ°, которая ΠΎΠ±Ρ€Π°Π±Π°Ρ‚Ρ‹Π²Π°Π΅Ρ‚ динамичСский ΠΊΠΎΠ½Ρ‚Π΅Π½Ρ‚, ΠΎΠ±Ρ…ΠΎΠ΄ΠΈΡ‚ ΠΌΠ΅Ρ…Π°Π½ΠΈΠ·ΠΌΡ‹ Π·Π°Ρ‰ΠΈΡ‚Ρ‹ ΠΎΡ‚ Π±ΠΎΡ‚ΠΎΠ², ΠΈΠ·Π²Π»Π΅ΠΊΠ°Π΅Ρ‚ структурированныС Π΄Π°Π½Π½Ρ‹Π΅ ΠΈ ΠΌΠ°ΡΡˆΡ‚Π°Π±ΠΈΡ€ΡƒΠ΅Ρ‚ Π·Π°Π΄Π°Ρ‡ΠΈ сбора массивов ΠΈΠ½Ρ„ΠΎΡ€ΠΌΠ°Ρ†ΠΈΠΈ. Асинхронная Π°Ρ€Ρ…ΠΈΡ‚Π΅ΠΊΡ‚ΡƒΡ€Π° Π΄Π°Π΅Ρ‚ Π²Ρ‹ΡΠΎΠΊΡƒΡŽ ΡΠΊΠΎΡ€ΠΎΡΡ‚ΡŒ Ρ€Π°Π±ΠΎΡ‚Ρ‹ Π΄Π°ΠΆΠ΅ со слоТным JavaScript. На Π²Ρ‹Ρ…ΠΎΠ΄Π΅ - Ρ„ΠΎΡ€ΠΌΠ°Ρ‚Ρ‹ JSON, markdown ΠΈ ΠΎΡ‡ΠΈΡ‰Π΅Π½Π½Ρ‹ΠΉ HTML, Π³ΠΎΡ‚ΠΎΠ²Ρ‹Π΅ для ΠΈΠΌΠΏΠΎΡ€Ρ‚Π° Π² LLM. Crawl4AI ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ Chromium, Firefox ΠΈ WebKit Ρ‡Π΅Ρ€Π΅Π· Playwright.

🟒LitServe - ΡƒΠ½ΠΈΠ²Π΅Ρ€ΡΠ°Π»ΡŒΠ½Ρ‹ΠΉ Π΄Π²ΠΈΠΆΠΎΠΊ для развСртывания ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ.

Π”Π΅Ρ‚ΠΈΡ‰Π΅ LightningAI - ΠΌΠΎΡ‰Π½Ρ‹ΠΉ инструмСнт для развСртывания ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ ΠΈ слоТных AI-ΠΊΠΎΠ½Π²Π΅ΠΉΠ΅Ρ€ΠΎΠ². ΠŸΠΎΡΡ‚Ρ€ΠΎΠ΅Π½ Π½Π° Π±Π°Π·Π΅ FastAPI, ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ PyTorch, TensorFlow, JAX ΠΈ Ρ€Π°Π±ΠΎΡ‚Π°Π΅Ρ‚ с GenAI, Π‘V, ASR ΠΈ эмбСдингами. LitServe ΡƒΠΌΠ΅Π΅Ρ‚ Π² KV-ΠΊΡΡˆΠΈΡ€ΠΎΠ²Π°Π½ΠΈΠ΅ для LLM, ΠΈ ΠΏΠΎΠ΄Ρ…ΠΎΠ΄ΠΈΡ‚ ΠΊΠ°ΠΊ для Π»Π΅Π³ΠΊΠΈΡ… ΠΏΡ€ΠΈΠ»ΠΎΠΆΠ΅Π½ΠΈΠΉ, Ρ‚Π°ΠΊ ΠΈ для тяТСлых ΠΊΠΎΡ€ΠΏΠΎΡ€Π°Ρ‚ΠΈΠ²Π½Ρ‹Ρ… Π½Π°Π³Ρ€ΡƒΠ·ΠΎΠΊ.

🟒Mirascope - ΡƒΠ½ΠΈΡ„ΠΈΡ†ΠΈΡ€ΠΎΠ²Π°Π½Π½Ρ‹ΠΉ интСрфСйс LLM.

Python-инструмСнт для упрощСния извлСчСния структурированных Π΄Π°Π½Π½Ρ‹Ρ… ΠΈΠ· LLM. Он ΠΏΡ€Π΅Π΄Π»Π°Π³Π°Π΅Ρ‚ ΡƒΠ΄ΠΎΠ±Π½Ρ‹ΠΉ интСрфСйс, основанный Π½Π° Π΄Π΅ΠΊΠΎΡ€Π°Ρ‚ΠΎΡ€Π°Ρ… ΠΈ Π΄Π΅ΠΊΠ»Π°Ρ€Π°Ρ‚ΠΈΠ²Π½Ρ‹Ρ… схСмах. Mirascope ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ OpenAI, Anthropic ΠΈ Cohere ΠΈ ΠΈΠΌΠ΅Π΅Ρ‚ свой поисковый Π°Π³Π΅Π½Ρ‚ WebSearchAgent, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΉ ΠΌΠΎΠΆΠ΅Ρ‚ Π°Π²Ρ‚ΠΎΠ½ΠΎΠΌΠ½ΠΎ ΡΠΎΠ±ΠΈΡ€Π°Ρ‚ΡŒ ΠΈΠ½Ρ„ΠΎΡ€ΠΌΠ°Ρ†ΠΈΡŽ ΠΈΠ· ΠΈΠ½Ρ‚Π΅Ρ€Π½Π΅Ρ‚Π°.

🟒Surya - OCR с высокой Ρ‚ΠΎΡ‡Π½ΠΎΡΡ‚ΡŒΡŽ.

OCR-систСма Π½Π° 90 языках. Surya ΠΈΠ·Π²Π»Π΅ΠΊΠ°Π΅Ρ‚ тСкст ΠΈΠ· сканированных ΠΈΠ·ΠΎΠ±Ρ€Π°ΠΆΠ΅Π½ΠΈΠΉ, PDF-Ρ„Π°ΠΉΠ»ΠΎΠ² ΠΈ Π΄Ρ€ΡƒΠ³ΠΈΡ… Π²ΠΈΠ·ΡƒΠ°Π»ΡŒΠ½Ρ‹Ρ… Ρ„ΠΎΡ€ΠΌΠ°Ρ‚ΠΎΠ² с Ρ‚ΠΎΡ‡Π½ΠΎΡΡ‚ΡŒΡŽ, сравнимой с Google Cloud Vision. Помимо OCR, Surya ΠΏΡ€ΠΎΠ²ΠΎΠ΄ΠΈΡ‚ Ρ€Π°ΡΡˆΠΈΡ€Π΅Π½Π½Ρ‹ΠΉ Π°Π½Π°Π»ΠΈΠ· Π΄ΠΎΠΊΡƒΠΌΠ΅Π½Ρ‚Π°, опрСдСляя Π·Π°Π³ΠΎΠ»ΠΎΠ²ΠΊΠΈ, изобраТСния, Ρ‚Π°Π±Π»ΠΈΡ†Ρ‹ ΠΈ порядок чтСния, Ρ‡Ρ‚ΠΎ идСально для ΠΎΡ†ΠΈΡ„Ρ€ΠΎΠ²ΠΊΠΈ ΠΊΠ½ΠΈΠ³, Ρ„ΠΎΡ€ΠΌ ΠΈ Π½Π°ΡƒΡ‡Π½Ρ‹Ρ… Π΄ΠΎΠΊΡƒΠΌΠ΅Π½Ρ‚ΠΎΠ².

🟒DataChain - ΠΊΠΎΠ½Π²Π΅ΠΉΠ΅Ρ€ Π΄Π°Π½Π½Ρ‹Ρ… для ИИ.

ΠŸΠ»Π°Ρ‚Ρ„ΠΎΡ€ΠΌΠ° для управлСния вСрсиями ΠΌΡƒΠ»ΡŒΡ‚ΠΈΠΌΠΎΠ΄Π°Π»ΡŒΠ½Ρ‹Ρ… Π½Π°Π±ΠΎΡ€ΠΎΠ² ΠΈΠ·ΠΎΠ±Ρ€Π°ΠΆΠ΅Π½ΠΈΠΉ, Π²ΠΈΠ΄Π΅ΠΎ, тСкста ΠΈ PDF-Ρ„Π°ΠΉΠ»ΠΎΠ². Π‘ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊΠ° ΠΏΡ€Π΅ΠΎΠ±Ρ€Π°Π·ΡƒΠ΅Ρ‚ Ρ€Π°Π·Ρ€ΠΎΠ·Π½Π΅Π½Π½Ρ‹Π΅ Ρ„Π°ΠΉΠ»Ρ‹ Π² Ρ†Π΅Π½Ρ‚Ρ€Π°Π»ΠΈΠ·ΠΎΠ²Π°Π½Π½Ρ‹Π΅ датасСты, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ Π»Π΅Π³ΠΊΠΎ Π·Π°ΠΏΡ€Π°ΡˆΠΈΠ²Π°Ρ‚ΡŒ ΠΈ ΠΌΠ°Π½ΠΈΠΏΡƒΠ»ΠΈΡ€ΠΎΠ²Π°Ρ‚ΡŒ с ΠΏΠΎΠΌΠΎΡ‰ΡŒΡŽ Python Π±Π΅Π· использования Spark ΠΈΠ»ΠΈ SQL. DataChain ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ PyTorch, TensorFlow, AI-Π³Π΅Π½Π΅Ρ€Π°Ρ†ΠΈΡŽ ΠΌΠ΅Ρ‚Π°Π΄Π°Π½Π½Ρ‹Ρ…, ΡΠ΅Ρ€ΠΈΠ°Π»ΠΈΠ·Π°Ρ†ΠΈΡŽ инфСрСнса LLM ΠΈ Π²Ρ‹ΠΏΠΎΠ»Π½Π΅Π½ΠΈΠ΅ ΠΏΠ°ΠΊΠ΅Ρ‚Π½Ρ‹Ρ… ΠΏΡ€ΠΎΡ†Π΅Π΄ΡƒΡ€.

🟒Narwhals - ΡƒΠ½ΠΈΠ²Π΅Ρ€ΡΠ°Π»ΡŒΠ½Ρ‹ΠΉ слой совмСстимости для DataFrame-Π±ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊ.

ЛСгковСсный слой, ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΉ ΠΎΠ±ΡŠΠ΅Π΄ΠΈΠ½ΡΠ΅Ρ‚ pandas, Polars, PyArrow, Modin ΠΈ cuDF Π² Python. Он позволяСт ΠΏΠΈΡΠ°Ρ‚ΡŒ ΠΊΠΎΠ΄, Π½Π΅ зависящий ΠΎΡ‚ ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΠ΅ΠΌΠΎΠ³ΠΎ бэкСнда, ΠΈΡΠΏΠΎΠ»ΡŒΠ·ΡƒΡ подмноТСство API Polars Π² качСствС интСрфСйса. ΠŸΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ ΠΊΠ°ΠΊ eager, Ρ‚Π°ΠΊ ΠΈ lazy execution стили, Π²ΠΊΠ»ΡŽΡ‡Π°Ρ Dask. Narwhals Π½Π΅ ΠΈΠΌΠ΅Π΅Ρ‚ зависимостСй ΠΈ обСспСчиваСт ΡΡ‚Π°Ρ‚ΠΈΡ‡Π΅ΡΠΊΡƒΡŽ Ρ‚ΠΈΠΏΠΈΠ·Π°Ρ†ΠΈΡŽ для Π°Π²Ρ‚ΠΎΠ·Π°Π²Π΅Ρ€ΡˆΠ΅Π½ΠΈΡ ΠΈ подсказок Π² IDE.

🟒PydanticAI - Ρ„Ρ€Π΅ΠΉΠΌΠ²ΠΎΡ€ΠΊ для Ρ€Π°Π·Ρ€Π°Π±ΠΎΡ‚ΠΊΠΈ AI-ΠΏΡ€ΠΈΠ»ΠΎΠΆΠ΅Π½ΠΈΠΉ.

Π€Ρ€Π΅ΠΉΠΌΠ²ΠΎΡ€ΠΊ Π°Π³Π΅Π½Ρ‚ΠΎΠ², ΠΊΠΎΡ‚ΠΎΡ€Ρ‹Π΅ ΡƒΠΏΡ€Π°Π²Π»ΡΡŽΡ‚ взаимодСйствиСм с LLM ΠΈ ΠΏΡ€ΠΎΠ²Π΅Ρ€ΠΊΠΎΠΉ ΠΈΡ… инфСрСнса. Π˜ΠΌΠ΅Π΅Ρ‚ систСму внСдрСния зависимостСй, ΠΏΠΎΠ·Π²ΠΎΠ»ΡΡŽΡ‰ΡƒΡŽ динамичСски ΠΏΠΎΠ»ΡƒΡ‡Π°Ρ‚ΡŒ контСкстныС Π΄Π°Π½Π½Ρ‹Π΅. PydanticAI ΠΏΠΎΠ΄Π΄Π΅Ρ€ΠΆΠΈΠ²Π°Π΅Ρ‚ ΠΏΠΎΠ»ΡŒΠ·ΠΎΠ²Π°Ρ‚Π΅Π»ΡŒΡΠΊΠΈΠ΅ Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΈ Python, Π²Ρ‹Π·Ρ‹Π²Π°Π΅ΠΌΡ‹Π΅ Π°Π³Π΅Π½Ρ‚Π°ΠΌΠΈ для доступа ΠΊ ΠΈΠ½Ρ„ΠΎΡ€ΠΌΠ°Ρ†ΠΈΠΈ ΠΈ выполнСния вычислСний.


@ai_machinelearning_big_data

BY Python/ django




Share with your friend now:
tgoop.com/pythonl/4496

View MORE
Open in Telegram


Telegram News

Date: |

Among the requests, the Brazilian electoral Court wanted to know if they could obtain data on the origins of malicious content posted on the platform. According to the TSE, this would enable the authorities to track false content and identify the user responsible for publishing it in the first place. How to Create a Private or Public Channel on Telegram? Telegram channels enable users to broadcast messages to multiple users simultaneously. Like on social media, users need to subscribe to your channel to get access to your content published by one or more administrators. To edit your name or bio, click the Menu icon and select β€œManage Channel.” Judge Hui described Ng as inciting others to β€œcommit a massacre” with three posts teaching people to make β€œtoxic chlorine gas bombs,” target police stations, police quarters and the city’s metro stations. This offence was β€œrather serious,” the court said.
from us


Telegram Python/ django
FROM American