reagent package

Subpackages

• reagent.core package
  • Submodules
  • reagent.core.aggregators module
  • reagent.core.base_dataclass module
  • reagent.core.configuration module
  • reagent.core.dataclasses module
  • reagent.core.debug_on_error module
  • reagent.core.fb_checker module
  • reagent.core.multiprocess_utils module
  • reagent.core.observers module
  • reagent.core.oss_tensorboard_logger module
  • reagent.core.parameters module
  • reagent.core.parameters_seq2slate module
  • reagent.core.registry_meta module
  • reagent.core.report_utils module
  • reagent.core.result_registries module
  • reagent.core.result_types module
  • reagent.core.running_stats module
  • reagent.core.tagged_union module
  • reagent.core.tensorboardX module
  • reagent.core.torch_utils module
  • reagent.core.tracker module
  • reagent.core.types module
  • reagent.core.utils module
  • Module contents
• reagent.data package
  • Submodules
  • reagent.data.data_fetcher module
  • reagent.data.manual_data_module module
  • reagent.data.oss_data_fetcher module
  • reagent.data.reagent_data_module module
  • reagent.data.spark_utils module
  • Module contents
• reagent.evaluation package
  • Subpackages
    • reagent.evaluation.feature_importance package
      • Submodules
      • reagent.evaluation.feature_importance.feature_importance_base module
      • reagent.evaluation.feature_importance.feature_importance_perturbation module
      • Module contents
  • Submodules
  • reagent.evaluation.cpe module
  • reagent.evaluation.doubly_robust_estimator module
  • reagent.evaluation.evaluation_data_page module
  • reagent.evaluation.evaluator module
  • reagent.evaluation.ope_adapter module
  • reagent.evaluation.sequential_doubly_robust_estimator module
  • reagent.evaluation.weighted_sequential_doubly_robust_estimator module
  • reagent.evaluation.world_model_evaluator module
  • Module contents
• reagent.gym package
  • Subpackages
    • reagent.gym.agents package
      • Submodules
      • reagent.gym.agents.agent module
      • reagent.gym.agents.post_step module
      • Module contents
    • reagent.gym.datasets package
      • Submodules
      • reagent.gym.datasets.episodic_dataset module
      • reagent.gym.datasets.replay_buffer_dataset module
      • Module contents
    • reagent.gym.envs package
      • Subpackages
      • Submodules
      • reagent.gym.envs.changing_arms module
      • reagent.gym.envs.env_wrapper module
      • reagent.gym.envs.gym module
      • reagent.gym.envs.oracle_pvm module
      • reagent.gym.envs.recsim module
      • reagent.gym.envs.toy_vm module
      • reagent.gym.envs.utils module
      • Module contents
    • reagent.gym.policies package
      • Subpackages
      • Submodules
      • reagent.gym.policies.policy module
      • reagent.gym.policies.predictor_policies module
      • reagent.gym.policies.random_policies module
      • Module contents
    • reagent.gym.preprocessors package
      • Submodules
      • reagent.gym.preprocessors.default_preprocessors module
      • reagent.gym.preprocessors.replay_buffer_inserters module
      • reagent.gym.preprocessors.trainer_preprocessor module
      • Module contents
    • reagent.gym.runners package
      • Submodules
      • reagent.gym.runners.gymrunner module
      • Module contents
    • reagent.gym.tests package
      • Subpackages
      • Submodules
      • reagent.gym.tests.test_gym module
      • reagent.gym.tests.test_gym_datasets module
      • reagent.gym.tests.test_gym_offline module
      • reagent.gym.tests.test_gym_replay_buffer module
      • reagent.gym.tests.test_linear_dynamics module
      • reagent.gym.tests.test_pomdp module
      • reagent.gym.tests.test_world_model module
      • Module contents
  • Submodules
  • reagent.gym.normalizers module
  • reagent.gym.types module
  • reagent.gym.utils module
  • Module contents
• reagent.lite package
  • Submodules
  • reagent.lite.optimizer module
  • Module contents
• reagent.mab package
  • Submodules
  • reagent.mab.mab_algorithm module
  • reagent.mab.simulation module
  • reagent.mab.thompson_sampling module
  • reagent.mab.ucb module
  • Module contents
• reagent.model_managers package
  • Subpackages
    • reagent.model_managers.actor_critic package
      • Submodules
      • reagent.model_managers.actor_critic.sac module
      • reagent.model_managers.actor_critic.td3 module
      • Module contents
    • reagent.model_managers.discrete package
      • Submodules
      • reagent.model_managers.discrete.discrete_c51dqn module
      • reagent.model_managers.discrete.discrete_crr module
      • reagent.model_managers.discrete.discrete_dqn module
      • reagent.model_managers.discrete.discrete_qrdqn module
      • Module contents
    • reagent.model_managers.model_based package
      • Submodules
      • reagent.model_managers.model_based.cross_entropy_method module
      • reagent.model_managers.model_based.seq2reward_model module
      • reagent.model_managers.model_based.synthetic_reward module
      • reagent.model_managers.model_based.world_model module
      • Module contents
    • reagent.model_managers.parametric package
      • Submodules
      • reagent.model_managers.parametric.parametric_dqn module
      • Module contents
    • reagent.model_managers.policy_gradient package
      • Submodules
      • reagent.model_managers.policy_gradient.ppo module
      • reagent.model_managers.policy_gradient.reinforce module
      • Module contents
    • reagent.model_managers.ranking package
      • Submodules
      • reagent.model_managers.ranking.slate_q module
      • Module contents
  • Submodules
  • reagent.model_managers.actor_critic_base module
  • reagent.model_managers.discrete_dqn_base module
  • reagent.model_managers.model_manager module
  • reagent.model_managers.parametric_dqn_base module
  • reagent.model_managers.slate_q_base module
  • reagent.model_managers.union module
  • reagent.model_managers.world_model_base module
  • Module contents
• reagent.model_utils package
  • Submodules
  • reagent.model_utils.seq2slate_utils module
  • Module contents
• reagent.models package
  • Submodules
  • reagent.models.actor module
  • reagent.models.base module
  • reagent.models.bcq module
  • reagent.models.categorical_dqn module
  • reagent.models.cem_planner module
  • reagent.models.containers module
  • reagent.models.convolutional_network module
  • reagent.models.critic module
  • reagent.models.dqn module
  • reagent.models.dueling_q_network module
  • reagent.models.embedding_bag_concat module
  • reagent.models.fully_connected_network module
  • reagent.models.linear_regression module
  • reagent.models.mdn_rnn module
  • reagent.models.mlp_scorer module
  • reagent.models.model_feature_config_provider module
  • reagent.models.no_soft_update_embedding module
  • reagent.models.seq2reward_model module
  • reagent.models.seq2slate module
  • reagent.models.seq2slate_reward module
  • reagent.models.synthetic_reward module
  • reagent.models.world_model module
  • Module contents
• reagent.net_builder package
  • Subpackages
    • reagent.net_builder.categorical_dqn package
      • Submodules
      • reagent.net_builder.categorical_dqn.categorical module
      • Module contents
    • reagent.net_builder.continuous_actor package
      • Submodules
      • reagent.net_builder.continuous_actor.dirichlet_fully_connected module
      • reagent.net_builder.continuous_actor.fully_connected module
      • reagent.net_builder.continuous_actor.gaussian_fully_connected module
      • Module contents
    • reagent.net_builder.discrete_actor package
      • Submodules
      • reagent.net_builder.discrete_actor.fully_connected module
      • Module contents
    • reagent.net_builder.discrete_dqn package
      • Submodules
      • reagent.net_builder.discrete_dqn.dueling module
      • reagent.net_builder.discrete_dqn.fully_connected module
      • reagent.net_builder.discrete_dqn.fully_connected_with_embedding module
      • Module contents
    • reagent.net_builder.parametric_dqn package
      • Submodules
      • reagent.net_builder.parametric_dqn.fully_connected module
      • Module contents
    • reagent.net_builder.quantile_dqn package
      • Submodules
      • reagent.net_builder.quantile_dqn.dueling_quantile module
      • reagent.net_builder.quantile_dqn.quantile module
      • Module contents
    • reagent.net_builder.slate_ranking package
      • Submodules
      • reagent.net_builder.slate_ranking.slate_ranking_scorer module
      • reagent.net_builder.slate_ranking.slate_ranking_transformer module
      • Module contents
    • reagent.net_builder.slate_reward package
      • Submodules
      • reagent.net_builder.slate_reward.slate_reward_gru module
      • reagent.net_builder.slate_reward.slate_reward_transformer module
      • Module contents
    • reagent.net_builder.synthetic_reward package
      • Submodules
      • reagent.net_builder.synthetic_reward.ngram_synthetic_reward module
      • reagent.net_builder.synthetic_reward.sequence_synthetic_reward module
      • reagent.net_builder.synthetic_reward.single_step_synthetic_reward module
      • reagent.net_builder.synthetic_reward.transformer_synthetic_reward module
      • Module contents
    • reagent.net_builder.value package
      • Submodules
      • reagent.net_builder.value.fully_connected module
      • reagent.net_builder.value.seq2reward_rnn module
      • Module contents
  • Submodules
  • reagent.net_builder.categorical_dqn_net_builder module
  • reagent.net_builder.continuous_actor_net_builder module
  • reagent.net_builder.discrete_actor_net_builder module
  • reagent.net_builder.discrete_dqn_net_builder module
  • reagent.net_builder.parametric_dqn_net_builder module
  • reagent.net_builder.quantile_dqn_net_builder module
  • reagent.net_builder.slate_ranking_net_builder module
  • reagent.net_builder.slate_reward_net_builder module
  • reagent.net_builder.synthetic_reward_net_builder module
  • reagent.net_builder.unions module
  • reagent.net_builder.value_net_builder module
  • Module contents
• reagent.ope package
  • Subpackages
    • reagent.ope.datasets package
      • Submodules
      • reagent.ope.datasets.logged_dataset module
      • Module contents
    • reagent.ope.estimators package
      • Submodules
      • reagent.ope.estimators.contextual_bandits_estimators module
      • reagent.ope.estimators.estimator module
      • reagent.ope.estimators.sequential_estimators module
      • reagent.ope.estimators.slate_estimators module
      • reagent.ope.estimators.types module
      • Module contents
    • reagent.ope.test package
      • Subpackages
      • Submodules
      • reagent.ope.test.cartpole module
      • reagent.ope.test.envs module
      • reagent.ope.test.gridworld module
      • reagent.ope.test.mslr_slate module
      • reagent.ope.test.multiclass_bandits module
      • reagent.ope.test.yandex_web_search module
      • Module contents
    • reagent.ope.trainers package
      • Submodules
      • reagent.ope.trainers.linear_trainers module
      • reagent.ope.trainers.rl_tabular_trainers module
      • Module contents
  • Submodules
  • reagent.ope.utils module
  • Module contents
• reagent.optimizer package
  • Submodules
  • reagent.optimizer.optimizer module
  • reagent.optimizer.scheduler module
  • reagent.optimizer.scheduler_union module
  • reagent.optimizer.soft_update module
  • reagent.optimizer.uninferrable_optimizers module
  • reagent.optimizer.uninferrable_schedulers module
  • reagent.optimizer.union module
  • reagent.optimizer.utils module
  • Module contents
• reagent.prediction package
  • Subpackages
    • reagent.prediction.ranking package
      • Submodules
      • reagent.prediction.ranking.predictor_wrapper module
      • Module contents
    • reagent.prediction.synthetic_reward package
      • Submodules
      • reagent.prediction.synthetic_reward.synthetic_reward_predictor_wrapper module
      • Module contents
  • Submodules
  • reagent.prediction.predictor_wrapper module
  • Module contents
• reagent.preprocessing package
  • Submodules
  • reagent.preprocessing.batch_preprocessor module
  • reagent.preprocessing.identify_types module
  • reagent.preprocessing.normalization module
  • reagent.preprocessing.postprocessor module
  • reagent.preprocessing.preprocessor module
  • reagent.preprocessing.sparse_preprocessor module
  • reagent.preprocessing.sparse_to_dense module
  • reagent.preprocessing.transforms module
  • reagent.preprocessing.types module
  • Module contents
• reagent.publishers package
  • Submodules
  • reagent.publishers.file_system_publisher module
  • reagent.publishers.model_publisher module
  • reagent.publishers.no_publishing module
  • reagent.publishers.union module
  • Module contents
• reagent.replay_memory package
  • Submodules
  • reagent.replay_memory.circular_replay_buffer module
  • reagent.replay_memory.prioritized_replay_buffer module
  • reagent.replay_memory.sum_tree module
  • reagent.replay_memory.utils module
  • Module contents
• reagent.reporting package
  • Submodules
  • reagent.reporting.actor_critic_reporter module
  • reagent.reporting.compound_reporter module
  • reagent.reporting.discrete_crr_reporter module
  • reagent.reporting.discrete_dqn_reporter module
  • reagent.reporting.parametric_dqn_reporter module
  • reagent.reporting.reporter_base module
  • reagent.reporting.reward_network_reporter module
  • reagent.reporting.seq2reward_reporter module
  • reagent.reporting.slate_q_reporter module
  • reagent.reporting.td3_reporter module
  • reagent.reporting.world_model_reporter module
  • Module contents
• reagent.samplers package
  • Submodules
  • reagent.samplers.frechet module
  • Module contents
• reagent.scripts package
  • Submodules
  • reagent.scripts.hparam_tuning module
  • Module contents
• reagent.training package
  • Subpackages
    • reagent.training.cb package
      • Submodules
      • reagent.training.cb.linucb_trainer module
      • Module contents
    • reagent.training.cfeval package
      • Submodules
      • reagent.training.cfeval.bandit_reward_network_trainer module
      • Module contents
    • reagent.training.gradient_free package
      • Submodules
      • reagent.training.gradient_free.ars_util module
      • reagent.training.gradient_free.es_worker module
      • reagent.training.gradient_free.evolution_pool module
      • Module contents
    • reagent.training.ranking package
      • Submodules
      • reagent.training.ranking.helper module
      • reagent.training.ranking.seq2slate_attn_trainer module
      • reagent.training.ranking.seq2slate_sim_trainer module
      • reagent.training.ranking.seq2slate_tf_trainer module
      • reagent.training.ranking.seq2slate_trainer module
      • Module contents
    • reagent.training.world_model package
      • Submodules
      • reagent.training.world_model.compress_model_trainer module
      • reagent.training.world_model.mdnrnn_trainer module
      • reagent.training.world_model.seq2reward_trainer module
      • Module contents
  • Submodules
  • reagent.training.c51_trainer module
  • reagent.training.cem_trainer module
  • reagent.training.discrete_crr_trainer module
  • reagent.training.dqn_trainer module
  • reagent.training.dqn_trainer_base module
  • reagent.training.imitator_training module
  • reagent.training.multi_stage_trainer module
  • reagent.training.parameters module
  • reagent.training.parametric_dqn_trainer module
  • reagent.training.ppo_trainer module
  • reagent.training.qrdqn_trainer module
  • reagent.training.reagent_lightning_module module
  • reagent.training.reinforce_trainer module
  • reagent.training.reward_network_trainer module
  • reagent.training.rl_trainer_pytorch module
  • reagent.training.sac_trainer module
  • reagent.training.slate_q_trainer module
  • reagent.training.td3_trainer module
  • reagent.training.utils module
  • Module contents
• reagent.validators package
  • Submodules
  • reagent.validators.model_validator module
  • reagent.validators.no_validation module
  • reagent.validators.union module
  • Module contents
• reagent.workflow package
  • Submodules
  • reagent.workflow.cli module
  • reagent.workflow.env module
  • reagent.workflow.gym_batch_rl module
  • reagent.workflow.identify_types_flow module
  • reagent.workflow.training module
  • reagent.workflow.training_reports module
  • reagent.workflow.types module
  • reagent.workflow.utils module
  • Module contents

Module contents