Il faut créer un fichier inputs.txt contenant ceci :

file '/chemin/vers/fichier1.mp4'

file '/chemin/vers/fichier2.mp4'

file '/chemin/vers/fichier3.mp4'

Puis

ffmpeg -f concat -i inputs.txt -c copy mon_fichier.mp4