renate.benchmark package

Subpackages

• renate.benchmark.datasets package
  • Submodules
    • renate.benchmark.datasets.base module
      • DataIncrementalDataModule
    • renate.benchmark.datasets.nlp_datasets module
      • HuggingFaceTextDataModule
      • MultiTextDataModule
    • renate.benchmark.datasets.vision_datasets module
      • TinyImageNetDataModule
      • TorchVisionDataModule
      • to_long()
      • CLEARDataModule
      • DomainNetDataModule
      • CDDBDataModule
      • CORE50DataModule
    • renate.benchmark.datasets.wild_time_data module
      • WildTimeDataModule
• renate.benchmark.models package
  • MultiLayerPerceptron
  • ResNet18
  • ResNet18CIFAR
  • ResNet34
  • ResNet34CIFAR
  • ResNet50
  • ResNet50CIFAR
  • LearningToPromptTransformer
    • LearningToPromptTransformer.forward_for_monkey_patching()
  • PromptedTransformer
    • PromptedTransformer.forward()
  • SPromptTransformer
    • SPromptTransformer.increment_task()
    • SPromptTransformer.update_task_identifier()
    • SPromptTransformer.set_extra_state()
    • SPromptTransformer.features()
  • VisionTransformerB16
  • VisionTransformerB32
  • VisionTransformerCIFAR
  • VisionTransformerH14
  • VisionTransformerL16
  • VisionTransformerL32
  • Submodules
    • renate.benchmark.models.base module
      • RenateBenchmarkingModule
    • renate.benchmark.models.l2p module
      • PromptPool
      • PromptedTransformer
      • LearningToPromptTransformer
    • renate.benchmark.models.mlp module
      • MultiLayerPerceptron
    • renate.benchmark.models.resnet module
      • ResNet
      • ResNet18CIFAR
      • ResNet34CIFAR
      • ResNet50CIFAR
      • ResNet18
      • ResNet34
      • ResNet50
    • renate.benchmark.models.spromptmodel module
      • PromptPool
      • SPromptTransformer
    • renate.benchmark.models.transformer module
      • FeatureExtractorTextTransformer
      • HuggingFaceSequenceClassificationTransformer
    • renate.benchmark.models.vision_transformer module
      • FeatureExtractorViTModel
      • VisionTransformer
      • VisionTransformerCIFAR
      • VisionTransformerB16
      • VisionTransformerB32
      • VisionTransformerL16
      • VisionTransformerL32
      • VisionTransformerH14

Submodules

• renate.benchmark.experiment_config module
  • model_fn()
  • get_data_module()
  • get_scenario()
  • loss_fn()
  • data_module_fn()
  • train_transform()
  • test_transform()
  • lr_scheduler_fn()
  • metrics_fn()
  • optimizer_fn()
• renate.benchmark.experimentation module
  • experiment_config_file()
  • create_cumulative_metrics()
  • cumulative_metrics_summary()
  • individual_metrics_summary()
  • execute_experiment_job()
• renate.benchmark.scenarios module
  • Scenario
    • Scenario.prepare_data()
    • Scenario.setup()
    • Scenario.train_data()
    • Scenario.val_data()
    • Scenario.test_data()
    • Scenario.train_collate_fn()
    • Scenario.val_collate_fn()
    • Scenario.test_collate_fn()
  • ClassIncrementalScenario
    • ClassIncrementalScenario.setup()
  • TransformScenario
    • TransformScenario.setup()
  • ImageRotationScenario
  • PermutationScenario
  • IIDScenario
    • IIDScenario.setup()
  • FeatureSortingScenario
  • HueShiftScenario
  • DataIncrementalScenario
    • DataIncrementalScenario.prepare_data()
    • DataIncrementalScenario.setup()