sotastream

• sotastream package
  • Subpackages
    • sotastream.augmentors package
      • Submodules
      • Module contents
    • sotastream.filters package
      • Submodules
      • Module contents
    • sotastream.pipelines package
      • Submodules
      • Module contents
    • sotastream.utils package
      • Submodules
      • Module contents
  • Submodules
    • sotastream.cli module
      • add_global_args()
      • adjustSeed()
      • main()
      • maybe_split_files()
      • run_pipeline_process()
    • sotastream.data module
      • Line
  • Module contents
    • Defaults
      • Defaults.BUFFER_SIZE
      • Defaults.DOC_PROB
      • Defaults.DOC_PROB_PARALLEL
      • Defaults.DOC_SEPARATOR
      • Defaults.MAX_TOKENS
      • Defaults.NUM_PROCESSES
      • Defaults.QUEUE_BUFFER_SIZE
      • Defaults.QUIET
      • Defaults.SAMPLE_FILE
      • Defaults.SAMPLE_LENGTH
      • Defaults.SEED
      • Defaults.SEPARATOR
      • Defaults.SHUFFLE
      • Defaults.SPM_MODEL