Проблема, с которой я столкнулся, заключается в установке соответствующих зависимостей для искры в Ubuntu. Например, для Apache Spark 3.3.x требуется другая версия Python, более старая версия Java и т. д. — То же самое для графических фреймов. Поэтому я не уверен, какую версию зависимости загрузить для моего задания. Где я могу проверить, какой версии Spark нужна какая версия зависимостей?
Я пробовал ChatGPT и Gemini. ChatGPT посоветовал установить openjdk 11, а Gemini посоветовал установить openjdk 17 и python 3.1.x — но проблема все еще сохраняется.
Подробнее здесь: https://stackoverflow.com/questions/797 ... -requisite