سلام.تابعی نداریم که این کار را به صورت مستقیم انجام بده چون تعداد رکورد ها در متا دیتای فایل tfrecord نوشته نمیشه و با iterator می تونید کد دیتاست را پیمایش کنید و تعداد رکورد ها را محاسبه کنید به صورت زیر:
sum(1 for _ in tf.python_io.tf_record_iterator(file_name))