nitowa
/
Distributed-Union-Find
Observar 1
Favorito 0
Fork 0
Código Issues 0 Pull requests 0 Versões 0 Wiki Atividade
Você não pode selecionar mais de 25 tópicos Os tópicos devem começar com uma letra ou um número, podem incluir traços ('-') e podem ter até 35 caracteres.
3 Commits
1 Branch
Tag: 8c4b598043
Branches Tags
${ item.name }
Criar branch ${ searchTerm }
de 8c4b598043
${ noResults }
Distributed-Union-Find/submit.sh

submit.sh 513B
Histórico Original

1234567891011121314 
  1. SPARK_HOME="/home/osboxes/Downloads/spark-3.2.2-bin-hadoop3.2"

  2. MEMORY="1g"

  3. SPARK_MASTER="spark://osboxes:7077"

  4. CASSANDRA_HOST="localhost"

  5. 

  6. 

  7. "$SPARK_HOME"/bin/spark-submit \

  8. --master "$SPARK_MASTER" \

  9. --conf spark.executor.memory="$MEMORY" \

  10. --conf spark.cassandra.connection.host="$CASSANDRA_HOST" \

  11. --conf spark.sql.session.timeZone=UTC \

  12. --conf spark.sql.extensions=com.datastax.spark.connector.CassandraSparkExtensions \

  13. --packages com.datastax.spark:spark-cassandra-connector_2.12:3.2.0 \

  14. ./src/spark/main.py