No se realmente si en java existe pero en C#(.NET) puedes hacer algo muy sencillo con una string, al cual le puedes hacer

string lineaLeida = "1,2,3,4";
string[] separada = lineaLeida.Split(',');

Y te devuelve un array(de strings) separados por el char que le pasaste en al método Split() como parámetro, luego es cuestión de recorrer ese array, sumarlos y calcular el promedio

Salu2s

Mod: Habia puesto dentro del split una comilla como char para hacerle split, me refería a una coma.

Un método pequeño:

public List<Integer> getAmountsOf(String directory, String fileName) throws IOException, NumberFormatException, RuntimeException {
	List<Integer> amounts = new ArrayList<>();
	Path path = Paths.get(directory, fileName);
	Charset charset = Charset.forName("UTF-8");
	// lee todas las lineas del fichero
	List<String> lines = Files.readAllLines(path, charset);
	if(lines == null || lines.empty()) {
		throw new RuntimeException("El archivo est&#225; vac&#237;o");
	}
	for (String line : lines) {
		String[] tokens = line.split(",");
		int sum = 0;
		for(String token : tokens) {
			sum += Integer.parseInt(token);
		}
		amounts.add(sum);
	}
	return amounts;
}

Modo de uso:

try {
	List<Integer> amounts = getAmountsOf("D://prueba", "fichero.txt");
} catch(IOException e) {
	System.out.println("Error al leer fichero: "+e.getMessage());
} catch(NumberFormatException e2) {
	System.out.println("Una l&#237;nea contiene un car&#225;cter no num&#233;rico: "+e2.getMessage());
} catch(RuntimeException e3) {
	System.out.println(e3.getMessage()); // imprime: 'El archivo est&#225; vac&#237;o'
}

Si es personal, perfecto, pero si es sobre éste tema, sería bueno que se resuelva aquí, porque le puede servir a otra persona. Si has solucionado tu problema, por favor marca el tema como solucionado (check verde en la parte superior derecha).

Acá tenes otra forma de hacerlo.

Tu forma es bastante funcional, pero si quisieras hacer algo con esos promedios desde otra parte del código, te verías limitado.

Solo debes de agregar un ArrayList y hacer un cambio en el for:

import java.io.File;
import java.util.ArrayList;
import java.util.Scanner;
 
 
public class ImprimirPromedios {
 
    public static void main(String[] args) {
        File file = new File ("miarchivo.txt");
        Scanner lector = null;
 
        try {
            lector = new Scanner(file);
        } 
        catch (Exception ex) {
            System.out.println("Error: "+ex.getMessage());
        }
 
        ArrayList<Integer> promedios = new ArrayList<Integer>();
 
        int suma=0;
        int cant=0;
 
        /*
        Sumo todos los numeros de todas las lineas y despues la divido por la cantidad de numeros
        */
        while(lector.hasNext()) {
            //Leo una linea completa del archivo
            String numerosDelArchivo = lector.nextLine();
 
            //Separo los numeros y los guardo en un array de String
            String[] numerosSeparados = numerosDelArchivo.split(",");
 
            //Sumo todos los numeros del array y los guardo en la variable suma
            for(int i = 0; i < numerosSeparados.length; i++) {
                suma += Integer.parseInt(numerosSeparados[i]);
                cant++;
            }
            promedios.add(suma/cant);
            suma = 0;
            cant = 0;
        }
 
        for(int i = 0; i < promedios.size(); i++) {
            System.out.println(i+1+") promedio "+i+1+" es: "+promedios.get(i));
        }
 
        lector.close();
    }
 
}
 

De esta forma, tendrías el promedio de cada linea y podrías hacer algunas cosas con esos valores, como por ejemplo obtener el promedio total:

int promedioTotal = 0;
 
        for(int i = 0; i < promedios.size(); i++) {
            promedioTotal += promedios.get(i);
        }
 
        System.out.println("El promedio total de lineas es: "+promedioTotal/promedios.size());
 

Si quieres probar este código, agrégalo al final del main.

Ready, espero que te haya servido, y hazle caso a Gus, si tienes alguna duda al respecto, escríbela aquí, aumentara las probabilidades de recibir una respuesta y puede que también le sirva a alguien mas.

Saludos!