megatron.data.indexed_dataset.create_doc_idx#

megatron.data.indexed_dataset.create_doc_idx(sizes)#