Major changes to support common configuration file for organize_videos scripts.
[videoscripts/.git] / organize_videos
1 #!/usr/bin/perl
2 # Author: Alan J. Pippin
3 # Description: Find videos from a temporary dropbox location and merge and move them into their final destination.
4
5 use File::Copy;
6 use File::Basename;
7 use Getopt::Std;
8 use File::stat;
9 use Time::localtime;
10 use File::Pid;
11
12 ####################################################################################################
13 # Configuration parameters
14 $mydir = `cd \$(dirname $0) 2>/dev/null; pwd`; chomp($mydir); unshift @INC,("$mydir");
15 # Default configuration values
16 require "organize_videos.conf";
17 # Override defaults with local customizations
18 if( -f "$mydir/organize_videos.conf.local") { require "organize_videos.conf.local"; }
19
20 ####################################################################################################
21
22 # Sanity check
23 if(! -d $srcpathname) { print "-E- Can't find srcpath: $srcpathname\n"; exit 1; }
24 if(! -d $dstpathname) { print "-E- Can't find dstpath: $dstpathname\n"; exit 1; }
25 if(! -x $merge_videos_by_day) { print "-E- Can't find required script: $merge_videos_by_day\n"; exit 1; }
26
27 my %monthname2month = (
28                        "Jan" => "01",
29                        "Feb" => "02",
30                        "Mar" => "03",
31                        "Apr" => "04",
32                        "May" => "05",
33                        "Jun" => "06",
34                        "Jul" => "07",
35                        "Aug" => "08",
36                        "Sep" => "09",
37                        "Oct" => "10",
38                        "Nov" => "11",
39                        "Dec" => "12"
40                        );
41
42 my %month2monthname = (
43                        "01" => "Jan",
44                        "02" => "Feb",
45                        "03" => "Mar",
46                        "04" => "Apr",
47                        "05" => "May",
48                        "06" => "Jun",
49                        "07" => "Jul",
50                        "08" => "Aug",
51                        "09" => "Sep",
52                        "10" => "Oct",
53                        "11" => "Nov",
54                        "12" => "Dec"
55                        );
56
57 getopts("htvnkpd:");
58
59 sub usage {
60     print "usage: $0 [-v] [-t] [-r] [-p] [-d <dir>]\n";
61     print "   -v        verbose; print file being moved (to).\n";
62     print "   -t        test; print what will happen, but don't do anything\n";
63     print "   -n        do not copy to dest; do not copy the resultant video files to the destination dir\n";
64     print "   -k        keep the individual video files that are merged. By default, after a merge, individual video files that were merged are removed\n";
65     print "   -p        only recreate video playlists, do not process any video files. Do this for each year & month of video clips in the directory specified by -d <dir>.\n";
66     print "   -d <dir>  directory to recreate the playlists in. Only needed if -p option is given\n";
67     return 1;
68 }
69
70 sub is_folder_empty {
71     my $dirname = shift;
72     opendir(my $dh, $dirname) or die "Not a directory";
73     return scalar(grep { $_ ne "." && $_ ne ".." } readdir($dh)) == 0;
74 }
75
76 sub create_playlists {
77     my ($dstdirs) = @_;
78     
79     foreach $dstdir (keys %{$dstdirs}) {
80         print "-> Recreating playlists in: $dstdir\n";
81         print "-> Creating playlists for each month & year of clips from this directory: $video_directory\n";
82         opendir(VIDEODIR, "$dstdir") or die "-E- could not open: $dstdir\n";
83         chdir "$dstdir" || die "-E- Unable to change directory to the dstdir: $dstdir\n";
84         
85         my @all_files = readdir VIDEODIR;
86         closedir(VIDEODIR);
87         @all_files = sort @all_files;
88
89         print "   Removing all existing playlists from the directory\n";
90         if(! defined $opt_t) { system("rm *.$playlist_extension > /dev/null 2>&1"); }
91     
92         foreach $file (@all_files) {
93             next if -d $file;
94             next if ($file !~ /\.avi$/i && $file !~ /\.mpg$/i && $file !~ /\.mkv$/i && $file !~ /\.3gp$/i && $file !~ /\.mov$/i && $file !~ /\.mts$/i);
95             if($file =~ /(\d\d\d\d)-(\d\d)-(\d\d)/) {
96                 $year = $1; $month = $2;
97                 print "   Adding $file to $year.$playlist_extension & $year-$month.$playlist_extension\n";
98                 if(! defined $opt_t) { system("echo \"$file\" >> $year.$playlist_extension"); }
99                 if(! defined $opt_t) { system("echo \"$file\" >> $year-$month.$playlist_extension"); }
100             } else {
101                 print "   Skipping $file since we can't extract the year and month from it\n"; 
102             }
103         }
104     }
105 }
106
107 # Sanity checks / Option processing
108 if(defined $opt_h) { usage(); exit 1; }
109 if(defined $opt_p) {
110     if(defined $opt_d) {
111         my %dstdirs = ("$opt_d",1); 
112         create_playlists(\%dstdirs);
113     } else {
114         die "-E- You must specify the -d <dir> option when using the -p option\n"; 
115     }
116     exit 0;
117 }
118
119 # Only proceed if there are video files to organize
120 $video_files_found=`$find_cmd_with_mkv`;
121 if(!$video_files_found) { exit 0; }
122
123 # Only proceed if no files have changed in the past $cmin minutes
124 $changed_files_found=`$find_changed_cmd`;
125 if($changed_files_found) { exit 0; }
126
127 # Only one instance of this script running at a time
128 my $pidfile = File::Pid->new({file => "$pid_file", pid => "$$"});
129 exit if $pidfile->running();
130 $pidfile->write();
131
132 # Print the date
133 system("date");
134
135 # Merge videos prior to copying them over to the destination path
136 my $errno = 0;
137 my $merge_opts = "";
138 if(defined $opt_t) { $merge_opts .= "-t "; }
139 if(defined $opt_k) { $merge_opts .= "-k "; }
140 $errno=system("$merge_videos_by_day -q -s \"$srcpathname\" $merge_opts");
141 $errno = $errno >> 8;
142 if($errno) { die "-E- $merge_videos_by_day encountered some errors with exit code $errno\n"; }
143
144 # Exit now if we are not supposed to copy the resultant video files to the destination path
145 if(defined $opt_n) {
146     $pidfile->remove();
147     print "\n\n";
148     exit 0;
149 }
150
151 # Copy the videos over to the destination path
152 my %dstdirs;
153 chdir "$srcpathname";
154 print "$find_cmd_with_mkv\n" if($opt_v);
155 foreach $file (`$find_cmd_with_mkv`) {
156
157     chomp($file);
158     $srcdir = dirname($file);
159     $file = basename($file);
160     $srcfile = $file;
161     $ext = $file; $ext =~ s/.*\.(\S+)$/$1/; $ext = lc($ext);
162     
163     print "Found movie: srcdir: $srcdir srcfile: $srcfile ext: $ext\n" if($opt_v);
164
165     # Throw out files not in the current srcpath
166     if((! -f "$srcfile") && (! -f "$srcdir/$srcfile")) { next; }
167         
168     # Make a note of the month, year, and day this video was taken (from the modification time of the file)
169     $date_taken = ctime(stat("$srcdir/$srcfile")->mtime);
170
171     # Get the date taken from the filename
172     if($srcfile =~ /^(\d+)-(\d+)-(\d+)/) {
173         $year = $1;
174         $month = $2;
175         $day = sprintf("%02d",$3);
176         $monthnum = $month;
177         $monthname = lc($month2monthname{$month});
178     }
179     elsif($srcfile =~ /^(\d\d\d\d)(\d\d)(\d\d)/) {
180         $year = $1;
181         $month = $2;
182         $day = sprintf("%02d",$3);
183         $monthnum = $month;
184         $monthname = lc($month2monthname{$month});
185     }
186     # Get the date taken from the modification time
187     elsif($date_taken =~ /\S+\s+(\S+)\s+(\d+)\s+\S+\s+(\d+)/) {
188         $year = $3;
189         $month = $1;
190         $day = sprintf("%02d",$2);
191         $monthnum = $monthname2month{$month};
192         $monthname = lc($month2monthname{$month});
193     } else {
194         print "-E- Unable to parse year and month from this file: $srcdir/$srcfile\n";
195         next;
196     }
197
198     # We are ready to pick a destination folder to put the video in
199     $dstdir = $dstpathname . "/" . $year;
200     $dstdirs[$dstdir] = 1;
201     $dstfile = $dstdir . "/" . $year . "-" . $monthnum . "-" . $day;
202
203     # Check for duplicate filenames at the destination
204     $newfile = $dstfile . "." . $video_suffix;
205     if(-e "$newfile.$ext") {
206         foreach $i ($video_suffix+1 .. '999') {
207             $newfile = $dstfile . "." . sprintf("%03d",$i);;
208             if(! -e "$newfile.$ext") { last; }
209         }
210         $dstfile = $newfile;
211     }
212     $dstfile = "$newfile.$ext";
213
214
215     if(defined $opt_t) {
216         print "-> Moving \"$srcdir/$srcfile\" to \"$dstfile\"\n";
217     } else {
218         # Make sure the destination directories exist
219         $errno=system("mkdir -p \"$dstdir\"");
220         if($errno) { print "-E- Error creating dstdir: $dstdir\n"; next; }
221         # Perform the move operation from $srcdir/$srcfile -> $dstfile
222         print "-> Moving \"$srcdir/$srcfile\" to \"$dstfile\"\n";
223         # Make sure the dstfile doesn't exist, if it does, don't do the move
224         if(! -f "$dstfile") {
225             $errno=system("mv \"$srcdir/$srcfile\" \"$dstfile\" 2>/dev/null");
226             if($errno) { print "-E- Error moving srcfile to dstfile: $srcdir/$srcfile -> $dstfile\n"; next; }
227         } else {
228             print "-> Skipping \"$srcdir/$srcfile\". Destfile \"$dstfile\" already exists.\n";
229         }
230         # Fix the permissions
231         system("chown $owner \"$dstfile\"");
232         system("chgrp $group \"$dstfile\"");
233         system("chmod $mode \"$dstfile\"");
234     }
235     
236     # Check to see if there is an empty sub directory to remove
237     if(($srcdir ne $srcpathname) && ($srcpathname ne ".")) { 
238         if(is_folder_empty($srcdir)) { 
239             print "-> Subdir detected for videos ($srcdir != $srcpathname)\n" if($opt_v);
240             if(! defined $opt_t) { 
241                 $tmpdir=`tempfile`;
242                 system("rm $tmpdir");
243                 system("cp -R \"$srcdir\" $tmpdir > /dev/null 2>/dev/null");
244                 system("rm -rf \"$srcdir\"");
245                 print "-> Moved empty subdir $srcdir to $tmpdir\n" if($opt_v);
246             }
247         }
248     }
249 }
250
251 # For each destination dir we copied new content into, recreate the playlists
252 create_playlists(\%dstdirs);
253
254 $pidfile->remove();
255
256 print "\n\n";