Moved the task to separate file.

master
Vladimir Protsenko 3 years ago
parent 8f51f3c4c3
commit 206641e695

@ -593,4 +593,6 @@ https://spark.apache.org/docs/latest/api/python/reference/api/pyspark.StorageLev
Проведите анализ данных велопарковок на языке Scala или Python в неинтерактивном режиме (`--deploy-mode cluster`). Инструкции по созданию и запуску приложений: Проведите анализ данных велопарковок на языке Scala или Python в неинтерактивном режиме (`--deploy-mode cluster`). Инструкции по созданию и запуску приложений:
- Scala `L1_noninteractive_bike_analysis_scala.md` - Scala `L1_noninteractive_bike_analysis_scala.md`
- Python `L1_noninteractive_bike_analysis_scala.py` - Python `L1_noninteractive_bike_analysis_scala.py`
Решите задачи [L1_Apache_Spark_Tasks.md](L1_Apache_Spark_Tasks.md)

@ -0,0 +1,7 @@
## Решите следующие задачи для данных велопарковок Сан-Франциско (trips.csv, stations.csv):
1. Найти велосипед с максимальным временем пробега.
2. Найти наибольшее геодезическое расстояние между станциями.
3. Найти путь велосипеда с максимальным временем пробега через станции.
4. Найти количество велосипедов в системе.
5. Найти пользователей потративших на поездки более 3 часов.

@ -375,14 +375,6 @@ val firstGrouped = tripsByStartStation
![](images/21_.png) ![](images/21_.png)
## Задачи:
1. Найти велосипед с максимальным пробегом.
2. Найти наибольшее расстояние между станциями.
3. Найти путь велосипеда с максимальным пробегом через станции.
4. Найти количество велосипедов в системе.
5. Найти пользователей потративших на поездки более 3 часов.
## Запуск проекта в кластере ## Запуск проекта в кластере
Для запуска собранного проекта на сервере используйте команду `spark-submit`. Однако прежде чем собрать проект, необходимо его изменить, так как в данный момент в коде зашиты пути к файлам с данными в локальной системе и режим запуска (`setMaster(“local[2]“)`). Для запуска собранного проекта на сервере используйте команду `spark-submit`. Однако прежде чем собрать проект, необходимо его изменить, так как в данный момент в коде зашиты пути к файлам с данными в локальной системе и режим запуска (`setMaster(“local[2]“)`).

Loading…
Cancel
Save