BigDA - аналитик

@bigdatanal

Гео и язык канала: Беларусь, Русский

Категория: Технологии

Биг Дата Аналитик

Связанные каналы

Гео и язык канала

Беларусь, Русский

Категория

Технологии

Статистика

Избранное

Фильтр публикаций

Скрывать удаленные

Скрывать репосты

BigDA - аналитик

9 Oct, 21:47

Репост из: SQL и БД Learning

JupySQL — позволяет выполнять SQL-запросы в Jupyter/IPython с помощью %sql и %%sql

— pip install jupysql duckdb-engine

JupySQL — это форк ipython-sql с множеством исправленных ошибок и массой новых возможностей

JupySQL позволяет выполнять SQL-запросы и строить графики для больших наборов данных в Jupyter с помощью команд %sql, %%sql и %sqlplot.
JupySQL совместим со всеми основными БД (PostgreSQL, MySQL, SQL Server и др.), хранилищами данных (типа Snowflake, BigQuery, Redshift) и движками (SQLite и DuckDB).

🖥 GitHub
🟡 Доки

33 0 0 2

BigDA - аналитик

8 Oct, 15:58

@egafebridh/etl-process-with-dbt-and-dagster-b5d9a6e5cffe' rel='nofollow'>https://medium.com/@egafebridh/etl-process-with-dbt-and-dagster-b5d9a6e5cffe

ETL process with DBT and Dagster

This is a basic guide on how to develop ETL flow with dbt to build the models and dagster to schedule the task on windows.

33 0 0

BigDA - аналитик

8 Oct, 15:57

Репост из: Python clues

Единственная функция DBT — взять код, скомпилировать его в SQL-запрос, а затем выполнить его к вашей базе данных. ... DBT охватывает только T в ETL, поэтому вам потребуются другие инструменты для выполнения извлечения и загрузки данных в хранилище. https://habr.com/ru/articles/557736/

33 0 0

BigDA - аналитик

7 Oct, 13:03

"Big Data — это крупные массивы разнообразной информации и стек специальных технологий для работы с ней. Термин применяется к таким объемам данных, с которыми пользовательский компьютер и офисные программы не справятся. С помощью анализа больших данных бизнес может получить возможность принимать решения по развитию продукта и завоевывать конкурентное преимущество." https://yandex.cloud/ru/docs/glossary/bigdata

Документация Yandex Cloud | Облачная терминология | Big Data

Big Data или большие данные — это огромные объемы информации разной степени структурированности и технологии для работы с ней.

36 0 0

BigDA - аналитик

5 Oct, 13:34

45 0 0 1

BigDA - аналитик

3 Oct, 16:34

76 0 0 3

BigDA - аналитик

24 Sep, 13:41

Срочно ищем любителей моря, яхты, дельфинов и ныряния на рифе, приглашаем в нашу хорошую и интересную компанию. Нам не хватает людей дополнить места в каютах на яхте при небольших затратах на все путешествие. На неделю (19-25 октября) на спокойном и безапосном рифе в Египте. Включает инструкторов по нырянию и обслуживающий персонал. Подробности в личном сообщении. Спешите - всего пару мест осталось.
P.S. Рекомендую тем кому нужно расслабиться, снять стресс и зарядится позитивом

92 0 1

BigDA - аналитик

3 Sep, 22:33

105 0 0

BigDA - аналитик

29 Jul, 10:04

106 0 0

BigDA - аналитик

24 Jul, 09:10

https://data.europa.eu/apps/data-visualisation-guide/drill-down-story-structure

113 0 0

BigDA - аналитик

18 Jul, 19:09

Сатайя.pdf

3.1Мб

Приглашаем любителей

124 0 0

BigDA - аналитик

12 Jul, 15:06

Есть опытные аналитики с желанием сменить работу где постоянно растут на интересных проектах? Пишите в личку

129 0 1

BigDA - аналитик

11 Jul, 11:11

https://t.me/juniorlinux

🐧 Linux Junior. Программирование под Linux.

Канал для программистов работающих с Linux. Почти все Python девелоперы с нами ну и другие тоже подтянутся. По рекламе: @anothertechrock

119 0 0

BigDA - аналитик

11 Jul, 08:50

image.png

2.9Мб

Встречаются два аналитика-болельщика после матча их любимой команды. Матч закончился со счётом 0:0.

Первый аналитик: "Ну что, как тебе игра? Я же говорил, что если коэффициент владения мячом во втором тайме будет ниже 47%, то забить не получится! Вот график, я строил его весь матч!"

Второй аналитик (вздыхая): "Да уж, корреляция очевидна... А я вот heatmap передвижений игроков анализировал. Удивительно, но зоны наибольшей активности вообще не пересекались с вратарской площадкой!"

Первый аналитик: "Надо будет на следующую игру взять ноутбуки помощнее, чтобы в режиме реального времени моделировать траекторию ударов с учетом направления ветра и влажности газона."

Второй аналитик: "Ага, а то так и будем смотреть футбол, не понимая, что происходит!"

137 0 3

BigDA - аналитик

8 Jul, 09:10

Пришел молодой аналитик данных в крупную компанию. Весь из себя такой на стиле, модный, с макбуком, Python на губах. Устроился, значит, и давай всем рассказывать, как он сейчас все процессы автоматизирует, отчеты сам собой генерироваться будут, а Excel вообще устаревший инструмент.

Сидит он в опенспейсе, строчит код, а напротив него Галина Ивановна, главбух с 20-летним стажем, в 1С:Бухгалтерии цифры перебирает. Послушала-послушала его речи про нейросети и большие данные, да и говорит:

— Милок, а ты баланс свести сможешь в своей новомодной программке?

— Баланс? — переспросил парень, отрываясь от экрана. — Ну, это что, дебет с кредитом сверить? Да я вам скрипт за полчаса напишу!

— А отчет о прибылях и убытках с учетом НДС, амортизации и курсовых разниц? — не унимается Галина Ивановна.

Тут наш аналитик немного притих, задумался. А главбух, улыбнувшись, добавляет:

— Ты не спеши, милый. Python — это, конечно, хорошо. Но пока ты его учишь, 1С уже три раза обновили. Так что давай, работай, да поглядывай в нашу сторону. Жизнь она хитрее, чем твой код.

Задумался аналитик, а про себя решил, что пора и про 1С почитать. Вдруг, и правда, пригодится.

71 0 0

BigDA - аналитик

19 Jun, 13:24

пишите в личку

65 0 0

BigDA - аналитик

19 Jun, 13:24

Тестировщик на бэк
Обязанности:
◦ Проводить тестирование в соответствии с поставленными задачами
◦ Участвовать во всех видах тестирования: Smoke, функциональное, регрессионное, интеграционное, тестирование производительности, приемочное тестирование.
◦ Участвовать в написании тестовых сценариев
◦ Взаимодействать с несколькими командами разработки
◦ Разрабатывать и актуализировать тестовую документацию
Требования:
◦ Понимание основ СУБД
◦ SQL на среднем-высоком уровне: SELECT, INSERT, UPDATE, DELETE, WHERE, ORDER BY, GROUP BY, HAVING, агрегатные функции, вложенные запросы, оконные функции (желательно)
◦ Умение работать с GIT
◦ CI/CD
◦ Jenkins
◦ Опыт написания автотестов
◦ Знание видов тестирования: Smoke, функциональное, регрессионное, интеграционное, тестирование производительности.
◦ Опыт в написании тестовых сценариев
◦ Опыт взаимодействия с различными командами разработки на одном проекте
◦ Опыт работы от 3 до 6 лет, на крайний случай от 1 до 3
◦ Инициативность, ответственность, желание развиваться и совершенствоваться

71 0 0