Arquivos de texto

Você pode processar arquivos com a opção text de formato para analisar cada linha em qualquer arquivo baseado em texto como uma linha em um DataFrame. Isso pode ser útil para várias operações, incluindo análise de log. Também pode ser útil se você precisar ingerir dados CSV ou JSON como cadeias de caracteres brutas.

Para obter mais informações, consulte os arquivos de texto.

Opções

Consulte os seguintes artigos de referência do Apache Spark para obter opções de leitura e gravação com suporte.

• Ler
  • Python
  • Scala
• Gravar
  • Python
  • Scala