Python π Work With Data
ΠΡΠΊΡΡΡΡ Π² Telegram
A collection of books and articles on Python and various data manipulation tools. Overview of architecture of business intelligence systems, design and development of BI Reports, data processing in Python Pandas.
ΠΠΎΠ»ΡΡΠ΅1 608
ΠΠΎΠ΄ΠΏΠΈΡΡΠΈΠΊΠΈ
ΠΠ΅Ρ Π΄Π°Π½Π½ΡΡ
24 ΡΠ°ΡΠ°
ΠΠ΅Ρ Π΄Π°Π½Π½ΡΡ
7 Π΄Π½Π΅ΠΉ
-230 Π΄Π΅Π½Ρ
ΠΡΡ
ΠΈΠ² ΠΏΠΎΡΡΠΎΠ²
# ΠΡΠΏΠΎΠ»ΡΠ·ΡΠ΅ΡΠ΅ Π»ΠΈ ΠΡ Π²Π½ΡΡΡΠΈ ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΠΉ ΡΠΈΡΡΠ΅ΠΌΡ Π΄Π»Ρ ΠΎΠΏΠΈΡΠ°Π½ΠΈΡ ΠΌΠ΅ΡΡΠΈΠΊ (ΠΊΠ°ΠΊ ΠΌΠ΅ΡΡΠΈΠΊΠΈ ΡΡΠΈΡΠ°ΡΡΡΡ, Π² ΠΊΠ°ΠΊΠΈΡ
Π΄Π°ΡΠ±ΠΎΡΠ΄Π°Ρ
ΠΈΡΠΏΠΎΠ»ΡΠ·ΡΡΡΡΡ, ΠΈ Ρ.ΠΏ.)
ΠΡΠ΅ΠΌ ΠΏΡΠΈΠ²Π΅Ρ! Π₯ΠΎΡΡ ΡΠ΄Π΅Π»Π°ΡΡ Π΄Π²Π΅ Π³ΠΎΠ»ΠΎΡΠΎΠ²Π°Π»ΠΊΠΈ.
#1 - ΠΡΠΏΠΎΠ»ΡΠ·ΡΠ΅ΡΠ΅ Π»ΠΈ Π²Ρ Π² ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΠΈ ΡΠΈΡΡΠ΅ΠΌΡ Π΄Π»Ρ ΡΠΏΡΠ°Π²Π»Π΅Π½ΠΈΡ ΠΈΡΡΠΎΡΠ½ΠΈΠΊΠ°ΠΌΠΈ Π΄Π°Π½Π½ΡΡ
ΠΈ ΠΎΠΏΠΈΡΠ°Π½ΠΈΡ ΠΈΡΡΠΎΡΠ½ΠΈΠΊΠΎΠ² Π΄Π°Π½Π½ΡΡ
?
The State of Data Engineering 2022 - LakeFS
https://lakefs.io/the-state-of-data-engineering-2022/
Manage data like a product to unlock full value | McKinsey
https://www.mckinsey.com/business-functions/quantumblack/our-insights/how-to-unlock-the-full-value-of-data-manage-it-like-a-product
ΠΠ°Π½Π°Π» ΠΏΡΠΎ Apache Superset. ΠΠ΄Π΅ΡΡ ΠΏΠ΅ΡΠΈΠΎΠ΄ΠΈΡΠ΅ΡΠΊΠΈ ΠΏΡΠ±Π»ΠΈΠΊΡΡΡΡΡ ΡΠ²Π΅ΠΆΠΈΠ΅ ΠΌΠ°ΡΠ΅ΡΠΈΠ°Π»Ρ ΠΈ Π½ΠΎΠ²ΠΎΡΡΠΈ ΠΏΠΎ Open-Source ΠΏΡΠΎΠ΄ΡΠΊΡΡ.
ΠΠΎΠ΄ΠΏΠΈΡΡΠ²Π°ΠΉΡΠ΅ΡΡ ππ
https://t.me/apache_superset_bi
#ΡΠ΅ΠΊΠ»Π°ΠΌΠ°
Repost from Reveal the Data
ΠΠΎΠΊΠ°ΠΏΡ Π΄Π°ΡΠ±ΠΎΡΠ΄ΠΎΠ²
Π‘Π΄Π΅Π»Π°Π» ΡΠ΄ΠΎΠ±Π½ΡΠΉ Π½Π°Π±ΠΎΡ Π³ΡΠ°ΡΠΈΠΊΠΎΠ² Π΄Π»Ρ ΠΌΠ°ΠΊΠ΅ΡΠΈΡΠΎΠ²Π°Π½ΠΈΡ Π΄Π°ΡΠ±ΠΎΡΠ΄ΠΎΠ². ΠΠ½ ΡΠΈΠ»ΡΠ½ΠΎ ΡΡΠΊΠΎΡΡΠ΅Ρ ΡΠ°Π·ΡΠ°Π±ΠΎΡΠΊΡ ΠΌΠ°ΠΊΠ΅ΡΠΎΠ². Π― Π΄Π°Π²Π½ΠΎ ΠΏΠΎΠ»ΡΠ·ΡΡΡΡ ΡΡ
ΠΎΠΆΠΈΠΌ Π½Π°Π±ΠΎΡΠΎΠΌ, ΠΈ ΡΠ°ΡΡΠΎ ΠΏΡΡΠΌΠΎ Π½Π° Π²ΡΡΡΠ΅ΡΠ°Ρ
Ρ Π·Π°ΠΊΠ°Π·ΡΠΈΠΊΠ°ΠΌΠΈ ΡΠΎΠ±ΠΈΡΠ°Ρ ΠΌΠ°ΠΊΠ΅Ρ Π²ΠΌΠ΅ΡΡΠ΅ Ρ Π½ΠΈΠΌΠΈ. ΠΡΠΎ Π±ΡΡΡΡΠΎ ΠΈ Π½Π°Π³Π»ΡΠ΄Π½ΠΎ.
ΠΠ΅ΡΡΠΈΠΈ
β Π Π²ΠΈΠ΄Π΅ PPTX ΠΏΡΠ΅Π·Π΅Π½ΡΠ°ΡΠΈΠΈ: ΡΠ°ΠΌΡΠΉ Π±ΡΡΡΡΡΠΉ Π²Π°ΡΠΈΠ°Π½Ρ, ΠΌΠΎΠΆΠ½ΠΎ ΠΊΠΎΠΏΠΈΡΠΎΠ²Π°ΡΡ ΡΠ»Π΅ΠΌΠ΅Π½ΡΡ ΠΏΡΠΎΡΡΠΎ ΠΏΠ΅ΡΠ΅Π½ΠΎΡΡ ΠΈΡ
Ρ Π·Π°ΠΆΠ°ΡΡΠΌ Ctrl/Cmd ΠΈ Π³ΠΈΠ±ΠΊΠΎ Π½Π°ΡΡΡΠ°ΠΈΠ²Π°ΡΡ ΠΊΠ°ΡΡΠΈΠ½ΠΊΠΈ.
β Π Π²ΠΈΠ΄Π΅ ΠΊΠ½ΠΈΠ³ΠΈ Π² Π’Π°Π±Π»ΠΎ: ΠΌΠΎΠΆΠ½ΠΎ ΡΠΎΠ½ΠΊΠΎ Π½Π°ΡΡΡΠΎΠΈΡΡ Π³ΡΠ°ΡΠΈΠΊΠΈ, ΠΎΠ½ΠΈ Π»ΡΡΡΠ΅ Π·Π°ΠΏΠΎΠ»Π½ΡΡΡ ΠΏΡΠΎΡΡΡΠ°Π½ΡΡΠ²ΠΎ ΠΈ ΠΊΠ°ΡΡΠΈΠ½ΠΊΠ° ΠΏΠΎΠ»ΡΡΠ°Π΅ΡΡΡ ΠΏΡΠΈΠ±Π»ΠΈΠΆΠ΅Π½Π½Π°Ρ ΠΊ ΡΠΈΠ½Π°Π»ΡΠ½ΠΎΠΌΡ ΡΠ΅Π·ΡΠ»ΡΡΠ°ΡΡ.
β ΠΠ° Π΄ΠΎΡΠΊΠ΅ Π² Miro: ΡΠ΄ΠΎΠ±Π½ΠΎ ΡΠ΅ΡΠΈΡΡ ΠΈ ΠΎΠ±ΡΡΠΆΠ΄Π°ΡΡ, Π΄ΠΎΠ±Π°Π²Π»ΡΡΡ ΠΈΠ΄Π΅ΠΈ ΠΈ Π·Π°ΠΌΠ΅ΡΠ°Π½ΠΈΡ, Π½ΠΎ Π½Π΅ ΠΎΡΠ΅Π½Ρ ΡΠ΄ΠΎΠ±Π½ΠΎ ΡΠ°Π±ΠΎΡΠ°ΡΡ Ρ ΠΊΠ°ΡΡΠΈΠ½ΠΊΠ°ΠΌΠΈ.
ΠΡΠ°ΡΠΈΠΊΠΈ ΡΠ΄Π΅Π»Π°Π½Ρ Π² Π½Π΅ΠΉΡΡΠ°Π»ΡΠ½ΠΎΠΌ ΡΡΠΈΠ»Π΅, ΡΡΠΎΠ±Ρ Π½Π΅ ΠΎΡΠ²Π»Π΅ΠΊΠ°ΡΡ ΠΎΡ Π±ΠΈΠ·Π½Π΅Ρ Π·Π°Π΄Π°ΡΠΈ ΠΈ ΠΏΠΎΠ΄ΡΠ΅ΡΠΊΠ½ΡΡΡ, ΡΡΠΎ ΡΡΠΎ ΠΌΠΎΠΊΠ°ΠΏ. Π£Π΄ΠΎΠ±Π½ΠΎ ΠΏΠΎΠ²Π΅ΡΡ
ΠΊΠ°ΡΡΠΈΠ½ΠΎΠΊ ΠΏΠΈΡΠ°ΡΡ ΡΡΠΊΠΈΠΌ ΡΠ²Π΅ΡΠΎΠΌ ΠΈΠ΄Π΅ΠΈ, ΡΠ΅Π°Π»ΡΠ½ΡΠ΅ Π½Π°Π·Π²Π°Π½ΠΈΡ ΠΌΠ΅ΡΡΠΈΠΊ ΠΈ Ρ.ΠΏ. ΠΡΠ»ΠΈ Ρ Π²Π°Ρ Π΅ΡΡΡ ΡΠ²ΠΎΠΉ ΡΡΠ°ΠΉΠ»Π³Π°ΠΉΠ΄ ΠΈΠ»ΠΈ Π΄ΡΡΠ³Π°Ρ BI, ΡΠ΄Π΅Π»Π°ΠΉΡΠ΅ ΡΠ°ΠΊΠΈΠ΅ ΠΆΠ΅ ΠΈΠ½ΡΡΡΡΠΌΠ΅Π½ΡΡ Π½Π° ΡΠ²ΠΎΠΈΡ
Π³ΡΠ°ΡΠΈΠΊΠ°Ρ
, ΠΏΡΠΎΡΡΠΎ Π½Π°ΡΠΊΡΠΈΠ½ΠΈΠ² ΠΈ Π½Π°ΡΠ΅Π·Π°Π² ΡΡΡΠ΅ΡΡΠ²ΡΡΡΠΈΠ΅ Π΄Π°ΡΠ±ΠΎΡΠ΄Ρ.
@revealthedata
Π‘ΠΎΠ·Π΄Π°Π½ΠΈΠ΅ ΡΠΎΠ²ΡΠ΅ΠΌΠ΅Π½Π½ΠΎΠΉ ΠΏΠ»Π°ΡΡΠΎΡΠΌΡ Π΄Π»Ρ ΡΠ°Π±ΠΎΡΡ Ρ Π΄Π°Π½Π½ΡΠΌΠΈ Ρ ΠΏΠΎΠΌΠΎΡΡΡ Open-Source-ΡΠ΅ΡΠ΅Π½ΠΈΠΉ
https://habr.com/en/company/vk/blog/671642/
Repost from Apache Superset BI
π ΠΡΠΎΡΠΌΠΎΡΡ ΠΌΠΎΠ΄Π΅Π»ΠΈ permission Π² Superset ΡΡΠ΅Π΄ΡΡΠ²Π°ΠΌΠΈ Qlik Sense
https://telegra.ph/Prosmotr-modeli-permission-v-Superset-sredstvami-Qlik-Sense-06-09
βοΈΠΡΠΈΡΠΎΠ΅Π΄ΠΈΠ½ΡΠΉΡΠ΅ΡΡ ΠΊ ΠΊΠ°Π½Π°Π»Ρ ππΏ Apache Superset BI π
π A curated list of awesome data visualization libraries and resources.
https://github.com/javierluraschi/awesome-dataviz
Repost from ΠΠ½ΠΆΠΈΠ½ΠΈΡΠΈΠ½Π³ ΠΠ°Π½Π½ΡΡ
Π‘Π΅Π³ΠΎΠ΄Π½Ρ ΡΠ·Π½Π°Π», ΡΡΠΎ Π΅ΡΠ»ΠΈ Π² github .com Π·Π°ΠΌΠ΅Π½ΠΈΡΡ Π½Π° .dev ΡΠΎ ΠΎΡΠΊΡΠΎΠ΅ΡΡΡ Visual Code Π² Π±ΡΠ°ΡΠ·Π΅ΡΠ΅!
ΠΡΡ ΠΏΡΠΎ Apache Superset Π·Π΄Π΅ΡΡ https://t.me/apache_superset_bi
ΠΠΎΠ΄Π±ΠΎΡΠΎΡΠΊΠ° Π΄ΠΈΠ·Π°ΠΉΠ½ΠΎΠ² dashboards, charts, admin panels & analytics
https://search.muz.li/inspiration/dashboard-inspiration
Repost from ΠΠ½ΠΆΠΈΠ½ΠΈΡΠΈΠ½Π³ ΠΠ°Π½Π½ΡΡ
ΠΠΠΠ£ΠΠ¬ 7-2 Π§Π’Π Π’ΠΠΠΠ APACHE SPARK
Apache Spark ΡΠ²Π»ΡΠ΅ΡΡΡ ΡΠ°ΠΌΡΠΌ ΠΏΠΎΠΏΡΠ»ΡΡΠ½ΡΠΌ ΠΈΠ½ΡΡΡΡΠΌΠ΅Π½ΡΠΎΠΌ ΡΡΠ΅Π΄ΠΈ ΠΈΠ½ΠΆΠ΅Π½Π΅ΡΠΎΠ² Π΄Π°Π½Π½ΡΡ
, Π°Π½Π°Π»ΠΈΡΠΈΠΊΠΎΠ² ΠΈ ΠΈΠ½ΠΆΠ΅Π½Π΅ΡΠΎΠ² ΠΌΠ°ΡΠΈΠ½Π½ΠΎΠ³ΠΎ ΠΎΠ±ΡΡΠ΅Π½ΠΈΡ. ΠΠ³ΠΎ Π³Π»Π°Π²Π½Π°Ρ Π·Π°Π΄Π°ΡΠ° ΡΡΠΎ ΠΎΠ±ΡΠ°Π±ΠΎΡΠΊΠ° Π΄Π°Π½Π½ΡΡ
. Π‘ ΠΏΠΎΠΌΠΎΡΡΡ Spark ΠΌΠΎΠΆΠ½ΠΎ ΠΏΠΎΠ΄ΠΊΠ»ΡΡΠ°ΡΡΡΡ ΠΊ Π»ΡΠ±ΠΎΠΌΡ ΠΈΡΡΠΎΡΠ½ΠΈΠΊΡ Π΄Π°Π½Π½ΡΡ
, ΡΠΈΡΠ°ΡΡ Π±ΠΎΠ»ΡΡΠΈΠ΅ Π΄Π°Π½Π½ΡΠ΅ ΠΈ ΠΎΠ±ΡΠ°Π±Π°ΡΡΠ²Π°ΡΡ ΠΈΡ
Π² ΠΎΠΏΠ΅ΡΠ°ΡΠΈΠ²Π½ΠΎΠΉ ΠΏΠ°ΠΌΡΡΠΈ Ρ ΠΈΡΠΏΠΎΠ»ΡΠ·ΠΎΠ²Π°Π½ΠΈΠ΅ΠΌ ΡΠ°ΡΠΏΡΠ΅Π΄Π΅Π»Π΅Π½Π½ΠΎΠ³ΠΎ Π²ΡΡΠΈΡΠ»Π΅Π½ΠΈΡ (distributed computing).
Π ΡΡΠΎΠΌ Π²ΠΈΠ΄Π΅ΠΎ:
π Π£Π·Π½Π°Π΅ΠΌ ΠΈΡΡΠΎΡΠΈΡ Apache Spark
π ΠΠΎΡΠΌΠΎΡΡΠΈΠΌ ΠΏΡΠΈΠΌΠ΅ΡΡ Π°ΡΡ
ΠΈΡΠ΅ΠΊΡΡΡ Ρ ΠΈΡΠΏΠΎΠ»ΡΠ·ΠΎΠ²Π°Π½ΠΈΠ΅ΠΌ Spark
π Π Π°Π·Π±Π΅ΡΠ΅ΠΌΡΡ ΠΊΠΎΠ³Π΄Π° Π΅Π³ΠΎ ΠΌΠΎΠΆΠ½ΠΎ ΠΈΡΠΏΠΎΠ»ΡΠ·ΠΎΠ²Π°ΡΡ
π Π£Π·Π½Π°Π΅ΠΌ ΠΏΡΠΎ ΠΎΡΠ½ΠΎΠ²Π½ΡΠ΅ ΠΊΠΎΠΌΠΏΠΎΠ½Π΅Π½ΡΡ
π Π£Π·Π½Π°Π΅ΠΌ, ΠΎΠ±ΠΎΠ·Π½Π°ΡΠ°Π΅Ρ ΡΠ΅ΡΠΌΠΈΠ½ Unified Analytics
ΠΡΡΠΊΠΎΡΠΈΠ»Π° ΡΠ΅ΠΊΠ»Π°ΠΌΠ° ΡΠΎΡΠ±ΠΈΠ°ΠΉ ΡΠΈΡΡΠ΅ΠΌΡ, ΠΎΡΡ πππ
ΠΡ ΠΊΡΠΎ ΠΈΠΌ ΡΠ΄Π΅Π»Π°Π» ΡΠ°ΠΊΠΎΠΉ ΡΠ°ΠΉΡ?
What is a Data Platform? And How to Build One
In this post:
- What is a data platform?
- The six must-have layers of a modern data platform
- Data Storage and Processing
- Data Ingestion
- Data Transformation and Modeling
- Business Intelligence (BI) and Analytics
- Data Observability
- Data Discovery
- Data platform vs. customer data platform
- Build or buy your 6-layer data platform? It depends.
https://www.montecarlodata.com/blog-what-is-a-data-platform-and-how-to-build-one/
Repost from Apache Superset BI
Π§ΡΠΎ ΡΠ°ΠΊΠΎΠ΅ Apache Superset? ΠΠ»ΡΡΡ ΠΈ ΠΌΠΈΠ½ΡΡΡ. Π£ΡΡΠ°Π½ΠΎΠ²ΠΊΠ° ΡΠ΅ΡΠ΅Π· Docker-Compose. ΠΡΠΈΠΌΠ΅ΡΡ Π΄Π°ΡΠ±ΠΎΡΠ΄ΠΎΠ², ΠΎΠ±Π·ΠΎΡ Π°ΡΡ
ΠΈΡΠ΅ΠΊΡΡΡΡ ΠΌΠ½ΠΎΠ³ΠΎΠΊΠΎΠ½ΡΠ΅ΠΉΠ½Π΅ΡΠ½ΠΎΠ³ΠΎ ΠΏΡΠΈΠ»ΠΎΠΆΠ΅Π½ΠΈΡ. ΠΠΏΠΈΡΠ°Π½ΠΈΠ΅ ΠΎΡΠ½ΠΎΠ²Π½ΡΡ
ΡΠΈΡ.
https://ivan-shamaev.ru/what-is-apache-superset-docker-install-dashboard-examples/
