Merge branch 'stable-3.1'

Marius Burkard

2016-02-11 486e424dfd1c57c4b4fef5c01319aca6d53cd7cf

 install/lib/installer_base.lib.php

@@ -36,6 +36,7 @@
   public $conf;
   public $install_ispconfig_interface = true;
   public $is_update = false; // true if it is an update, falsi if it is a new install
   public $min_php = '5.3.3'; // minimal php-version for update / install
   protected $mailman_group = 'list';


@@ -66,6 +67,12 @@
               $input = $default;
            } else {
               $input = $autoinstall[$name];
            }
         } elseif($name != '' && $autoupdate[$name] != '') {
            if($autoupdate[$name] == 'default') {
               $input = $default;
            } else {
               $input = $autoupdate[$name];
            }
         } else {
            $answers_str = implode(',', $answers);
@@ -104,6 +111,12 @@
         } else {
            $input = $autoinstall[$name];
         }
      } elseif($name != '' && $autoupdate[$name] != '') {
         if($autoupdate[$name] == 'default') {
            $input = $default;
         } else {
            $input = $autoupdate[$name];
         }
      } else {
         swrite($this->lng($query).' ['.$default.']: ');
         $input = sread();
@@ -129,6 +142,12 @@

   }
   */

   //** Detect PHP-Version
   public function get_php_version() {
      if(version_compare(PHP_VERSION, $this->min_php, '<')) return false;
      else return true;
   }

   //** Detect installed applications
   public function find_installed_apps() {
@@ -164,16 +183,30 @@
      if ($conf['services']['web'] && (($conf['apache']['installed'] && is_file($conf['apache']["vhost_conf_enabled_dir"]."/000-ispconfig.vhost")) || ($conf['nginx']['installed'] && is_file($conf['nginx']["vhost_conf_enabled_dir"]."/000-ispconfig.vhost")))) $this->ispconfig_interface_installed = true;
   }

    public function force_configure_app($service) {
    public function force_configure_app($service, $enable_force=true) {
      $force = false;
        swriteln("[WARN] autodetect for $service failed");
        if(strtolower($this->simple_query("Force configure $service", array('y', 'n'), 'n') ) == 'y') {
//         swriteln("Configure $service");
            $force = true;
      } else swriteln("Skipping $service\n");
      if($enable_force) {
           if(strtolower($this->simple_query("Force configure $service", array('y', 'n'), 'n') ) == 'y') {
               $force = true;
         } else swriteln("Skipping $service\n");
      }
      return $force;
    }

   public function reconfigure_app($service, $reconfigure_services_answer) {
      $reconfigure = false;
      if ($reconfigure_services_answer != 'selected') {
         $reconfigure = true;
      } else {
         if(strtolower($this->simple_query("Reconfigure $service", array('y', 'n'), 'y') ) == 'y') {
            $reconfigure = true;
         } else {
            swriteln("Skip reconfigure $service\n");
         }
      }
      return $reconfigure;
   }

   /** Create the database for ISPConfig */

@@ -332,7 +365,7 @@
         $conf['server_id'] = $conf['server_id'];

         //* Insert the same record in the local DB
         $sql = "INSERT INTO `server` (`server_id`, `sys_userid`, `sys_groupid`, `sys_perm_user`, `sys_perm_group`, `sys_perm_other`, `server_name`, `mail_server`, `web_server`, `dns_server`, `file_server`, `db_server`, `vserver_server`, `config`, `updated`, `active`, `dbversion`,`firewall_server`,`proxy_server`) VALUES (?,1, 1, 'riud', 'riud', 'r', ?, ?, ?, ?, ?, ?, ?, 0, 1, ?, ?, ?);";
         $sql = "INSERT INTO `server` (`server_id`, `sys_userid`, `sys_groupid`, `sys_perm_user`, `sys_perm_group`, `sys_perm_other`, `server_name`, `mail_server`, `web_server`, `dns_server`, `file_server`, `db_server`, `vserver_server`, `config`, `updated`, `active`, `dbversion`,`firewall_server`,`proxy_server`) VALUES (?,1, 1, 'riud', 'riud', 'r', ?, ?, ?, ?, ?, ?, ?, ?, 0, 1, ?, ?, ?);";
         $this->db->query($sql, $conf['server_id'], $conf['hostname'], $mail_server_enabled, $web_server_enabled, $dns_server_enabled, $file_server_enabled, $db_server_enabled, $vserver_server_enabled, $server_ini_content, $current_db_version, $proxy_server_enabled, $firewall_server_enabled);

         //* username for the ispconfig user
@@ -349,6 +382,84 @@
      }


   }
	
   public function detect_ips(){
      global $conf;

      exec("ip addr show | awk '/global/ { print $2 }' | cut -d '/' -f 1", $output, $retval);
		
      if($retval == 0){
         if(is_array($output) && !empty($output)){
            foreach($output as $line){
               $line = trim($line);
               $ip_type = '';
               if (filter_var($line, FILTER_VALIDATE_IP, FILTER_FLAG_IPV4)) {
                  $ip_type = 'IPv4';
               }
               if (filter_var($line, FILTER_VALIDATE_IP, FILTER_FLAG_IPV6)) {
                  $ip_type = 'IPv6';
               }
               if($ip_type == '') continue;
               if($this->db->dbHost != $this->dbmaster->dbHost){
                  $this->dbmaster->query('INSERT INTO server_ip (
                     sys_userid, sys_groupid, sys_perm_user, sys_perm_group,
                     sys_perm_other, server_id, client_id, ip_type, ip_address,
                     virtualhost, virtualhost_port
                  ) VALUES (
                     1,
                     1,
                     "riud",
                     "riud",
                     "",
                     ?,
                     0,
                     ?,
                     ?,
                     "y",
                     "80,443"
                  )', $conf['server_id'], $ip_type, $line);
                  $server_ip_id = $this->dbmaster->insertID();
                  $this->db->query('INSERT INTO server_ip (
                     server_php_id, sys_userid, sys_groupid, sys_perm_user, sys_perm_group,
                     sys_perm_other, server_id, client_id, ip_type, ip_address,
                     virtualhost, virtualhost_port
                  ) VALUES (
                     ?,
                     1,
                     1,
                     "riud",
                     "riud",
                     "",
                     ?,
                     0,
                     ?,
                     ?,
                     "y",
                     "80,443"
                  )', $server_ip_id, $conf['server_id'], $ip_type, $line);
               } else {
                  $this->db->query('INSERT INTO server_ip (
                     sys_userid, sys_groupid, sys_perm_user, sys_perm_group,
                     sys_perm_other, server_id, client_id, ip_type, ip_address,
                     virtualhost, virtualhost_port
                  ) VALUES (
                     1,
                     1,
                     "riud",
                     "riud",
                     "",
                     ?,
                     0,
                     ?,
                     ?,
                     "y",
                     "80,443"
                  )', $conf['server_id'], $ip_type, $line);
               }
            }
         }
      }
   }

   public function grant_master_database_rights($verbose = false) {
@@ -682,6 +793,12 @@
      exec('/usr/sbin/postmap /var/lib/mailman/data/transport-mailman');
   }

   //* with postfix >= 2.9 we can detect configured services with postconf
   public function postfix_master() {
       exec("postconf -M", $out, $ret);
      return $ret===0?true:false;
   }

   public function configure_postfix($options = '') {
      global $conf,$autoinstall;
      $cf = $conf['postfix'];
@@ -779,6 +896,8 @@
      }
      unset($server_ini_array);
      
      $tmp = str_replace('.','\.',$conf['hostname']);

      $postconf_placeholders = array('{config_dir}' => $config_dir,
         '{vmail_mailbox_base}' => $cf['vmail_mailbox_base'],
         '{vmail_userid}' => $cf['vmail_userid'],
@@ -786,6 +905,7 @@
         '{rbl_list}' => $rbl_list,
         '{greylisting}' => $greylisting,
         '{reject_slm}' => $reject_sender_login_mismatch,
         '{myhostname}' => $tmp,
      );

      $postconf_tpl = rfsel($conf['ispconfig_install_dir'].'/server/conf-custom/install/debian_postfix.conf.master', 'tpl/debian_postfix.conf.master');
@@ -816,6 +936,27 @@
      if(!is_file('/var/lib/mailman/data/transport-mailman')) touch('/var/lib/mailman/data/transport-mailman');
      exec('/usr/sbin/postmap /var/lib/mailman/data/transport-mailman');

      //* Create auxillary postfix conf files
      $configfile = 'helo_access';
      if(is_file($config_dir.'/'.$configfile)) {
         copy($config_dir.'/'.$configfile, $config_dir.'/'.$configfile.'~');
         chmod($config_dir.'/'.$configfile.'~', 0400);
      }
      $content = rfsel($conf['ispconfig_install_dir'].'/server/conf-custom/install/'.$configfile.'.master', 'tpl/'.$configfile.'.master');
      $content = strtr($content, $postconf_placeholders);
      # todo: look up this server's ip addrs and loop through each
      # todo: look up domains hosted on this server and loop through each
      wf($config_dir.'/'.$configfile, $content);

      $configfile = 'blacklist_helo';
      if(is_file($config_dir.'/'.$configfile)) {
         copy($config_dir.'/'.$configfile, $config_dir.'/'.$configfile.'~');
         chmod($config_dir.'/'.$configfile.'~', 0400);
      }
      $content = rfsel($conf['ispconfig_install_dir'].'/server/conf-custom/install/'.$configfile.'.master', 'tpl/'.$configfile.'.master');
      $content = strtr($content, $postconf_placeholders);
      wf($config_dir.'/'.$configfile, $content);

      //* Make a backup copy of the main.cf file
      copy($config_dir.'/main.cf', $config_dir.'/main.cf~');

@@ -844,19 +985,30 @@
      $command = 'chmod 755  /var/run/courier/authdaemon/';
      if(is_file('/var/run/courier/authdaemon/')) caselog($command.' &> /dev/null', __FILE__, __LINE__, 'EXECUTED: '.$command, 'Failed to execute the command '.$command);

      //* Changing maildrop lines in posfix master.cf
      if(is_file($config_dir.'/master.cf')) {
         copy($config_dir.'/master.cf', $config_dir.'/master.cf~');
      }
      if(is_file($config_dir.'/master.cf~')) {
         chmod($config_dir.'/master.cf~', 0400);
      }
      //* Check maildrop service in posfix master.cf
      $regex = "/^maildrop   unix.*pipe flags=DRhu user=vmail argv=\\/usr\\/bin\\/maildrop -d ".$cf['vmail_username']." \\$\{extension} \\$\{recipient} \\$\{user} \\$\{nexthop} \\$\{sender}/";
      $configfile = $config_dir.'/master.cf';
      $content = rf($configfile);
      $content = str_replace('flags=DRhu user=vmail argv=/usr/bin/maildrop -d ${recipient}',
         'flags=DRhu user='.$cf['vmail_username'].' argv=/usr/bin/maildrop -d '.$cf['vmail_username'].' ${extension} ${recipient} ${user} ${nexthop} ${sender}',
         $content);
      wf($configfile, $content);
      if ($this->postfix_master()) {
         exec ("postconf -M maildrop.unix &> /dev/null", $out, $ret);
         $change_maildrop_flags = @(preg_match($regex, $out[0]) && $out[0] !='')?false:true;
      } else { //* fallback - postfix < 2.9
         $change_maildrop_flags = @(preg_match($regex, $configfile))?false:true;
      }
      if ($change_maildrop_flags) {
         //* Change maildrop service in posfix master.cf
         if(is_file($config_dir.'/master.cf')) {
            copy($config_dir.'/master.cf', $config_dir.'/master.cf~');
         }
         if(is_file($config_dir.'/master.cf~')) {
            chmod($config_dir.'/master.cf~', 0400);
          }
         $configfile = $config_dir.'/master.cf';
         $content = rf($configfile);
         $content =   str_replace('flags=DRhu user=vmail argv=/usr/bin/maildrop -d ${recipient}',
                  'flags=DRhu user='.$cf['vmail_username'].' argv=/usr/bin/maildrop -d '.$cf['vmail_username'].' ${extension} ${recipient} ${user} ${nexthop} ${sender}',
                  $content);
         wf($configfile, $content);
      }

      //* Writing the Maildrop mailfilter file
      $configfile = 'mailfilter';
@@ -999,6 +1151,8 @@
      global $conf;
      
      $virtual_transport = 'dovecot';

      $configure_lmtp = false;
      
      // check if virtual_transport must be changed
      if ($this->is_update) {
@@ -1008,27 +1162,34 @@
         
         if(isset($ini_array['mail']['mailbox_virtual_uidgid_maps']) && $ini_array['mail']['mailbox_virtual_uidgid_maps'] == 'y') {
            $virtual_transport = 'lmtp:unix:private/dovecot-lmtp';
            $configure_lmtp = true;
         }
      }

      $config_dir = $conf['dovecot']['config_dir'];

      $config_dir = $conf['postfix']['config_dir'];
      //* Configure master.cf and add a line for deliver
      if(is_file($conf['postfix']['config_dir'].'/master.cf')) {
         copy($conf['postfix']['config_dir'].'/master.cf', $conf['postfix']['config_dir'].'/master.cf~2');
      if ($this->postfix_master()) {
         exec ("postconf -M dovecot.unix &> /dev/null", $out, $ret);
         $add_dovecot_service = @($out[0]=='')?true:false;
       } else { //* fallback - postfix < 2.9
         $content = rf($config_dir.'/master.cf');
         $add_dovecot_service = @(!stristr($content, "dovecot/deliver"))?true:false;
       }
      if($add_dovecot_service) {
          //* backup
         if(is_file($config_dir.'/master.cf')){
            copy($config_dir.'/master.cf', $config_dir.'/master.cf~2');
         }
         if(is_file($config_dir.'/master.cf~')){
            chmod($config_dir.'/master.cf~2', 0400);
         }
         //* Configure master.cf and add a line for deliver
         $content = rf($conf["postfix"]["config_dir"].'/master.cf');
         $deliver_content = 'dovecot   unix  -       n       n       -       -       pipe'."\n".'  flags=DRhu user=vmail:vmail argv=/usr/lib/dovecot/deliver -f ${sender} -d ${user}@${nexthop}';
         af($config_dir.'/master.cf', $deliver_content);
         unset($content);
         unset($deliver_content);
      }
      if(is_file($conf['postfix']['config_dir'].'/master.cf~')) {
         chmod($conf['postfix']['config_dir'].'/master.cf~2', 0400);
      }
      $content = rf($conf['postfix']['config_dir'].'/master.cf');
      // Only add the content if we had not addded it before
      if(!stristr($content, 'dovecot/deliver')) {
         $deliver_content = 'dovecot   unix  -       n       n       -       -       pipe'."\n".'  flags=DROhu user=vmail:vmail argv=/usr/lib/dovecot/deliver -f ${sender} -d ${user}@${nexthop}';
         af($conf['postfix']['config_dir'].'/master.cf', $deliver_content);
      }
      unset($content);
      unset($deliver_content);


      //* Reconfigure postfix to use dovecot authentication
      // Adding the amavisd commands to the postfix configuration
@@ -1049,6 +1210,7 @@
      }

      //* backup dovecot.conf
      $config_dir = $conf['dovecot']['config_dir'];
      $configfile = 'dovecot.conf';
      if(is_file($config_dir.'/'.$configfile)) {
         copy($config_dir.'/'.$configfile, $config_dir.'/'.$configfile.'~');
@@ -1076,6 +1238,11 @@
         if(version_compare($dovecot_version, 2.1, '<')) {
            removeLine($config_dir.'/'.$configfile, 'ssl_protocols =');
         }
      }

      //* dovecot-lmtpd
      if($configure_lmtp) {
         replaceLine($config_dir.'/'.$configfile, 'protocols = imap pop3', 'protocols = imap pop3 lmtp', 1, 0);
      }

      //* dovecot-sql.conf
@@ -1140,28 +1307,46 @@
         caselog($command." &> /dev/null", __FILE__, __LINE__, "EXECUTED: $command", "Failed to execute the command $command");
      }

      // Append the configuration for amavisd to the master.cf file
      if(is_file($conf['postfix']['config_dir'].'/master.cf')) copy($conf['postfix']['config_dir'].'/master.cf', $conf['postfix']['config_dir'].'/master.cf~');
      $content = rf($conf['postfix']['config_dir'].'/master.cf');
      // Only add the content if we had not addded it before
      if(!preg_match('/^amavis\s+unix\s+/m', $content)) {
         unset($content);
         $content = rfsel($conf['ispconfig_install_dir'].'/server/conf-custom/install/master_cf_amavis.master', 'tpl/master_cf_amavis.master');
         af($conf['postfix']['config_dir'].'/master.cf', $content);
         $content = rf($conf['postfix']['config_dir'].'/master.cf');
      $config_dir = $conf['postfix'];

      // Adding amavis-services to the master.cf file if the service does not already exists
      if ($this->postfix_master()) {
          exec ("postconf -M amavis.unix &> /dev/null", $out, $ret);
          $add_amavis = @($out[0]=='')?true:false;
          unset($out);
          exec ("postconf -M 127.0.0.1:10025.inet &> /dev/null", $out, $ret);
          $add_amavis_10025 = @($out[0]=='')?true:false;
          unset($out);
          exec ("postconf -M 127.0.0.1:10027.inet &> /dev/null", $out, $ret);
          $add_amavis_10027 = @($out[0]=='')?true:false;
          unset($out);
      } else { //* fallback - postfix < 2.9
          $content = rf($conf['postfix']['config_dir'].'/master.cf');
          $add_amavis = @(!preg_match('/^amavis\s+unix\s+/m', $content))?true:false;
          $add_amavis_10025 = @(!preg_match('/^127.0.0.1:10025\s+/m', $content))?true:false;
          $add_amavis_10027 = @(!preg_match('/^127.0.0.1:10027\s+/m', $content))?true:false;
      }
      if(!preg_match('/^127.0.0.1:10025\s+/m', $content)) {
         unset($content);
         $content = rfsel($conf['ispconfig_install_dir'].'/server/conf-custom/install/master_cf_amavis10025.master', 'tpl/master_cf_amavis10025.master');
         af($conf['postfix']['config_dir'].'/master.cf', $content);
         $content = rf($conf['postfix']['config_dir'].'/master.cf');

      if ($add_amavis || $add_amavis_10025 || $add_amavis_10027) {
         //* backup master.cf
         if(is_file($config_dir.'/master.cf')) copy($config_dir.'/master.cf', $config_dir.'/master.cf~');
         // adjust amavis-config
         if($add_amavis) {
            $content = rfsel($conf['ispconfig_install_dir'].'/server/conf-custom/install/master_cf_amavis.master', 'tpl/master_cf_amavis.master');
            af($config_dir.'/master.cf', $content);
            unset($content);
         }
         if ($add_amavis_10025) {
            $content = rfsel($conf['ispconfig_install_dir'].'/server/conf-custom/install/master_cf_amavis10025.master', 'tpl/master_cf_amavis10025.master');
            af($config_dir.'/master.cf', $content);
            unset($content);
         }
         if ($add_amavis_10027) {
            $content = rfsel($conf['ispconfig_install_dir'].'/server/conf-custom/install/master_cf_amavis10027.master', 'tpl/master_cf_amavis10027.master');
            af($config_dir.'/master.cf', $content);
            unset($content);
          }
      }
      if(!preg_match('/^127.0.0.1:10027\s+/m', $content)) {
         unset($content);
         $content = rfsel($conf['ispconfig_install_dir'].'/server/conf-custom/install/master_cf_amavis10027.master', 'tpl/master_cf_amavis10027.master');
         af($conf['postfix']['config_dir'].'/master.cf', $content);
      }
      unset($content);

      // Add the clamav user to the amavis group
      exec('adduser clamav amavis');
@@ -1320,6 +1505,27 @@


   }
	
   //** writes bind configuration files
   public function process_bind_file($configfile, $target='/', $absolute=false) {
      global $conf;

      if ($absolute) $full_file_name = $target.$configfile;
      else $full_file_name = $conf['ispconfig_install_dir'].$target.$configfile;
		
      //* Backup exiting file
      if(is_file($full_file_name)) {
         copy($full_file_name, $config_dir.$configfile.'~');
      }
      $content = rfsel($conf['ispconfig_install_dir'].'/server/conf-custom/install/'.$configfile.'.master', 'tpl/'.$configfile.'.master');
      $content = str_replace('{mysql_server_ispconfig_user}', $conf['mysql']['ispconfig_user'], $content);
      $content = str_replace('{mysql_server_ispconfig_password}', $conf['mysql']['ispconfig_password'], $content);
      $content = str_replace('{mysql_server_ispconfig_database}', $conf['mysql']['database'], $content);
      $content = str_replace('{mysql_server_ip}', $conf['mysql']['ip'], $content);
      $content = str_replace('{ispconfig_install_dir}', $conf['ispconfig_install_dir'], $content);
      $content = str_replace('{dnssec_conffile}', $conf['ispconfig_install_dir'].'/server/scripts/dnssec-config.sh', $content);
      wf($full_file_name, $content);
   }

   public function configure_bind() {
      global $conf;
@@ -1332,13 +1538,15 @@

      //* Create the slave subdirectory
      $content .= 'slave';
      if(!@is_dir($content)) mkdir($content, 2770, true);
      if(!@is_dir($content)) mkdir($content, 02770, true);

      //* Chown the slave subdirectory to $conf['bind']['bind_user']
      chown($content, $conf['bind']['bind_user']);
      chgrp($content, $conf['bind']['bind_group']);
      chmod($content, 2770);

      chmod($content, 02770);
		
      //* Install scripts for dnssec implementation
      $this->process_bind_file('named.conf.options', '/etc/bind/', true); //TODO replace hardcoded path
   }


@@ -1487,6 +1695,11 @@
         // Comment out the namevirtualhost lines, as they were added by ispconfig in ispconfig.conf file again
         replaceLine('/etc/apache2/ports.conf', 'NameVirtualHost *:80', '# NameVirtualHost *:80', 1);
         replaceLine('/etc/apache2/ports.conf', 'NameVirtualHost *:443', '# NameVirtualHost *:443', 1);
      }
		
      if(is_file('/etc/apache2/mods-available/fcgid.conf')) {
         // add or modify the parameters for fcgid.conf
         replaceLine('/etc/apache2/mods-available/fcgid.conf','MaxRequestLen','MaxRequestLen 15728640',1);
      }

      if(is_file('/etc/apache2/apache.conf')) {
@@ -1862,6 +2075,10 @@
         }
         $content = str_replace('{use_tcp}', $use_tcp, $content);
         $content = str_replace('{use_socket}', $use_socket, $content);
			
         // SSL in apps vhost is off by default. Might change later.
         $content = str_replace('{ssl_on}', 'off', $content);
         $content = str_replace('{ssl_comment}', '#', $content);

         wf($vhost_conf_dir.'/apps.vhost', $content);