public function run($args)
 {
     $parser = new BAMitgliederParser();
     $parser->parseAlle();
     $parser = new BAGremienParser();
     $parser->parseAlle();
     $parser = new BATerminParser();
     $parser->parseAlle();
     $parser = new BAAntragParser();
     $parser->parseAlle();
     $parser = new BAInitiativeParser();
     $parser->parseAlle();
 }
 public function run($args)
 {
     if (!isset($args[0]) || $args[0] != "alle" && $args[0] != "ohnereferat" && $args[0] <= 1) {
         die("./yiic reindex_ba_antrag [BA-Antrag-ID]|alle\n");
     }
     $parser = new BAAntragParser();
     if ($args[0] == "ohnereferat") {
         /** @var Antrag[] $antraege */
         $antraege = Antrag::model()->findAllByAttributes(["typ" => Antrag::$TYP_BA_ANTRAG, "referat_id" => null]);
         foreach ($antraege as $antrag) {
             $parser->parse($antrag->id);
         }
     } elseif ($args[0] == "alle") {
         $parser->parseAlle();
     } elseif ($args[0] > 0) {
         $parser->parse($args[0]);
     }
 }
 public function run($args)
 {
     echo "Gestartet: " . date("Y-m-d H:i:s") . "\n";
     try {
         $parser = new ReferentInnenParser();
         $parser->parseQuickUpdate();
         echo "Done ReferentInnen: " . date("Y-m-d H:i:s") . "\n";
     } catch (Exception $e) {
         RISTools::send_email(Yii::app()->params['adminEmail'], "RIS Exception ReferentIn", print_r($e, true), null, "system");
     }
     try {
         $parser = new StadtratTerminParser();
         $parser->parseQuickUpdate();
         echo "Done Termine: " . date("Y-m-d H:i:s") . "\n";
     } catch (Exception $e) {
         RISTools::send_email(Yii::app()->params['adminEmail'], "RIS Exception Stadtrattermin", print_r($e, true), null, "system");
     }
     try {
         $parser = new StadtratsvorlageParser();
         $parser->parseQuickUpdate();
         echo "Done Vorlagen: " . date("Y-m-d H:i:s") . "\n";
     } catch (Exception $e) {
         RISTools::send_email(Yii::app()->params['adminEmail'], "RIS Exception Vorlagen", print_r($e, true), null, "system");
     }
     try {
         $parser = new StadtratsantragParser();
         $parser->parseQuickUpdate();
         echo "Done Stadtratsanträge: " . date("Y-m-d H:i:s") . "\n";
     } catch (Exception $e) {
         RISTools::send_email(Yii::app()->params['adminEmail'], "RIS Exception StR-Anträge", print_r($e, true), null, "system");
     }
     try {
         $parser = new StadtraetInnenParser();
         //$parser->setParseAlleAntraege(true);
         $parser->parseQuickUpdate();
         echo "Done StadträtInnen: " . date("Y-m-d H:i:s") . "\n";
     } catch (Exception $e) {
         RISTools::send_email(Yii::app()->params['adminEmail'], "RIS Exception StadträtInnen", print_r($e, true), null, "system");
     }
     try {
         $parser = new BATerminParser();
         $parser->parseQuickUpdate();
         echo "Done BA Termine: " . date("Y-m-d H:i:s") . "\n";
     } catch (Exception $e) {
         RISTools::send_email(Yii::app()->params['adminEmail'], "RIS Exception BA-Termine", print_r($e, true), null, "system");
     }
     try {
         $parser = new BAInitiativeParser();
         $parser->parseQuickUpdate();
         echo "Done BA Initiative: " . date("Y-m-d H:i:s") . "\n";
     } catch (Exception $e) {
         RISTools::send_email(Yii::app()->params['adminEmail'], "RIS Exception BA-Initiative", print_r($e, true), null, "system");
     }
     try {
         $parser = new BAAntragParser();
         $parser->parseQuickUpdate();
         echo "Done BA Anträge: " . date("Y-m-d H:i:s") . "\n";
     } catch (Exception $e) {
         RISTools::send_email(Yii::app()->params['adminEmail'], "RIS Exception BA-Anträge", print_r($e, true), null, "system");
     }
     RISMetadaten::setzeLetzteAktualisierung(date("Y-m-d H:i:s"));
     RISMetadaten::recalcStats();
     echo "Done: " . date("Y-m-d H:i:s") . "\n";
 }
 public function parse($termin_id)
 {
     $termin_id = IntVal($termin_id);
     if (SITE_CALL_MODE != "cron") {
         echo "- Termin {$termin_id}\n";
     }
     $html_details = RISTools::load_file("http://www.ris-muenchen.de/RII/BA-RII/ba_sitzungen_details.jsp?Id={$termin_id}");
     $html_dokumente = RISTools::load_file("http://www.ris-muenchen.de/RII/BA-RII/ba_sitzungen_dokumente.jsp?Id={$termin_id}");
     $html_to = RISTools::load_file("http://www.ris-muenchen.de/RII/BA-RII/ba_sitzungen_tagesordnung.jsp?Id={$termin_id}");
     $daten = new Termin();
     $daten->typ = Termin::$TYP_AUTO;
     $daten->id = $termin_id;
     $daten->datum_letzte_aenderung = new CDbExpression('NOW()');
     $daten->gremium_id = NULL;
     $daten->referat = "";
     $daten->referent = "";
     $daten->vorsitz = "";
     $daten->sitzungsstand = "";
     $dokumente = [];
     if (preg_match("/ba_gremien_details\\.jsp\\?Id=([0-9]+)[\"'& ]/siU", $html_details, $matches)) {
         $daten->gremium_id = IntVal($matches[1]);
     }
     if ($daten->gremium_id) {
         /** @var Gremium $gr */
         $gr = Gremium::model()->findByPk($daten->gremium_id);
         if (!$gr) {
             echo "Lege Gremium an: " . $daten->gremium_id . "\n";
             $parser = new BAGremienParser();
             $parser->parse($daten->gremium_id);
         }
         $daten->ba_nr = $gr->ba_nr;
     }
     if (preg_match("/Termin:.*detail_div\">([^&<]+)[&<]/siU", $html_details, $matches)) {
         $termin = $matches[1];
         $MONATE = ["januar" => "01", "februar" => "02", "märz" => "03", "april" => "04", "mai" => "05", "juni" => "06", "juli" => "07", "august" => "08", "september" => "09", "oktober" => "10", "november" => "11", "dezember" => "12"];
         $x = explode(" ", trim($termin));
         $tag = IntVal($x[1]);
         if ($tag < 10) {
             $tag = "0" . IntVal($tag);
         }
         $jahr = IntVal($x[2]);
         $y = explode(".", $x[1]);
         $monat = $MONATE[mb_strtolower($y[1])];
         if ($monat < 10) {
             $monat = "0" . IntVal($monat);
         }
         $zeit = $x[3];
         $daten->termin = "{$jahr}-{$monat}-{$tag} {$zeit}:00";
     }
     if (preg_match("/Sitzungsort:.*detail_div\">([^<]*)[<]/siU", $html_details, $matches)) {
         $daten->sitzungsort = html_entity_decode($matches[1], ENT_COMPAT, "UTF-8");
     }
     if (preg_match("/Bezirksausschuss:.*link_bold_noimg\">([0-9]+)[\"'& ]/siU", $html_details, $matches)) {
         $daten->ba_nr = IntVal($matches[1]);
     }
     if (preg_match("/chste Sitzung:.*ba_sitzungen_details\\.jsp\\?Id=([0-9]+)[\"'& ]/siU", $html_details, $matches)) {
         $daten->termin_next_id = $matches[1];
     }
     if (preg_match("/Letzte Sitzung:.*ba_sitzungen_details\\.jsp\\?Id=([0-9]+)[\"'& ]/siU", $html_details, $matches)) {
         $daten->termin_prev_id = $matches[1];
     }
     if (preg_match("/Wahlperiode:.*detail_div_left_long\">([^>]*)<\\//siU", $html_details, $matches)) {
         $daten->wahlperiode = $matches[1];
     }
     if (preg_match("/Status:.*detail_div_left_long\">([^>]*)<\\//siU", $html_details, $matches)) {
         $daten->status = $matches[1];
     }
     if (trim($daten->wahlperiode) == "") {
         $daten->wahlperiode = "?";
     }
     preg_match_all("/<li><span class=\"iconcontainer\">.*title=\"([^\"]+)\"[^>]*href=\"(.*)\".*>(.*)<\\/a>/siU", $html_dokumente, $matches);
     for ($i = 0; $i < count($matches[1]); $i++) {
         $dokumente[] = ["url" => $matches[2][$i], "name" => $matches[3][$i], "name_title" => $matches[1][$i]];
     }
     $aenderungen = "";
     /** @var Termin $alter_eintrag */
     $alter_eintrag = Termin::model()->findByPk($termin_id);
     $changed = true;
     if ($alter_eintrag) {
         $changed = false;
         if ($alter_eintrag->termin != $daten->termin) {
             $aenderungen .= "Termin: " . $alter_eintrag->termin . " => " . $daten->termin . "\n";
         }
         if ($alter_eintrag->gremium_id != $daten->gremium_id) {
             $aenderungen .= "Gremium-ID: " . $alter_eintrag->gremium_id . " => " . $daten->gremium_id . "\n";
         }
         if ($alter_eintrag->sitzungsort != $daten->sitzungsort) {
             $aenderungen .= "Sitzungsort: " . $alter_eintrag->sitzungsort . " => " . $daten->sitzungsort . "\n";
         }
         if ($alter_eintrag->ba_nr != $daten->ba_nr) {
             $aenderungen .= "BA-Nr.: " . $alter_eintrag->ba_nr . " => " . $daten->ba_nr . "\n";
         }
         if ($alter_eintrag->termin_next_id != $daten->termin_next_id) {
             $aenderungen .= "Nächster Termin: " . $alter_eintrag->termin_next_id . " => " . $daten->termin_next_id . "\n";
         }
         if ($alter_eintrag->termin_prev_id != $daten->termin_prev_id) {
             $aenderungen .= "Voriger Termin: " . $alter_eintrag->termin_prev_id . " => " . $daten->termin_prev_id . "\n";
         }
         if ($alter_eintrag->wahlperiode != $daten->wahlperiode) {
             $aenderungen .= "Wahlperiode: " . $alter_eintrag->wahlperiode . " => " . $daten->wahlperiode . "\n";
         }
         if ($alter_eintrag->status != $daten->status) {
             $aenderungen .= "Status: " . $alter_eintrag->status . " => " . $daten->status . "\n";
         }
         if ($aenderungen != "") {
             $changed = true;
         }
     }
     if (!$alter_eintrag) {
         $daten->save();
     }
     $match_top = "<strong>(?<top>(([0-9\\.]+)|(&nbsp;)))<\\/strong>";
     $match_betreff = "<t[hd][^>]*>(?<betreff>.*)<\\/t[hd]>";
     $match_vorlage = "<t[hd][^>]*>(?<vorlage_holder>.*)<\\/t[hd]>";
     $match_entscheidung = "<td[^>]*>(?<entscheidung>.*)<\\/td>";
     preg_match_all("/<tr class=\"ergebnistab_tr\">.*{$match_top}.*{$match_betreff}.*{$match_vorlage}.*{$match_entscheidung}.*<\\/tr>/siU", $html_to, $matches);
     foreach ($matches["betreff"] as $i => $val) {
         $matches["betreff"][$i] = static::text_clean_spaces($matches["betreff"][$i]);
     }
     $matches["betreff"] = RISTools::makeArrValuesUnique($matches["betreff"]);
     /** @var Tagesordnungspunkt[] $bisherige_tops */
     $bisherige_tops = $alter_eintrag ? $alter_eintrag->tagesordnungspunkte : [];
     $aenderungen_tops = "";
     $abschnitt_nr = "";
     $verwendete_top_betreffs = [];
     for ($i = 0; $i < count($matches["top"]); $i++) {
         $betreff = $matches["betreff"][$i];
         if (mb_stripos($betreff, "<strong>") !== false) {
             $abschnitt_nr = trim($matches["top"][$i], " \t\n\r\v.");
             $betreff = str_replace(["<strong>", "</strong>"], ["", ""], $betreff);
             if ($abschnitt_nr == "&nbsp;") {
                 if (preg_match("/TOP (?<top>[0-9.]+)+: (?<betreff>.*)/siu", $betreff, $matches2)) {
                     $abschnitt_nr = $matches2["top"];
                     $betreff = $matches2["betreff"];
                 } else {
                     $abschnitt_nr = "0";
                 }
             }
             $top_ueberschrift = true;
             $top_nr = $abschnitt_nr;
         } else {
             $top_ueberschrift = false;
             $top_nr = $abschnitt_nr . "." . $matches["top"][$i];
         }
         $vorlage_holder = trim(str_replace("&nbsp;", " ", $matches["vorlage_holder"][$i]));
         preg_match_all("/risid%3D(?<risid>[0-9]+)%27/siU", $vorlage_holder, $matches2);
         $vorlage_id = isset($matches2["risid"][0]) ? $matches2["risid"][0] : null;
         preg_match_all("/ba_antraege_details\\.jsp\\?Id=(?<risid>[0-9]+)\"/siU", $vorlage_holder, $matches2);
         $baantrag_id = isset($matches2["risid"][0]) ? $matches2["risid"][0] : null;
         if ($vorlage_id) {
             $vorlage = Antrag::model()->findByPk($vorlage_id);
             if (!$vorlage) {
                 echo "Creating: {$vorlage_id}\n";
                 $p = new StadtratsvorlageParser();
                 $p->parse($vorlage_id);
             }
         }
         if ($baantrag_id) {
             $baantrag = Antrag::model()->findByPk($baantrag_id);
             if (!$baantrag) {
                 echo "Creating: {$baantrag_id}\n";
                 $p = new BAAntragParser();
                 $p->parse($baantrag_id);
             }
         }
         $tagesordnungspunkt = new Tagesordnungspunkt();
         if ($vorlage_id) {
             $tagesordnungspunkt->antrag_id = $vorlage_id;
         } elseif ($baantrag_id) {
             $tagesordnungspunkt->antrag_id = $baantrag_id;
         } else {
             $tagesordnungspunkt->antrag_id = null;
         }
         $entscheidung_original = trim(str_replace("&nbsp;", " ", $matches["entscheidung"][$i]));
         $entscheidung = static::text_clean_spaces(preg_replace("/<a[^>]*>[^<]*<\\/a>/siU", "", $entscheidung_original));
         $tagesordnungspunkt->datum_letzte_aenderung = new CDbExpression("NOW()");
         $tagesordnungspunkt->sitzungstermin_id = $termin_id;
         $tagesordnungspunkt->sitzungstermin_datum = substr($daten->termin, 0, 10);
         $tagesordnungspunkt->top_nr = $top_nr;
         $tagesordnungspunkt->top_ueberschrift = $top_ueberschrift ? 1 : 0;
         $tagesordnungspunkt->entscheidung = $entscheidung;
         $tagesordnungspunkt->top_betreff = $betreff;
         $tagesordnungspunkt->gremium_id = $daten->gremium_id;
         $tagesordnungspunkt->gremium_name = $daten->gremium->name;
         $tagesordnungspunkt->beschluss_text = "";
         /** @var Tagesordnungspunkt[] $alte_tops */
         if ($vorlage_id) {
             $alte_tops = Tagesordnungspunkt::model()->findAllByAttributes(["sitzungstermin_id" => $termin_id, "antrag_id" => $vorlage_id]);
         } elseif ($baantrag_id) {
             $alte_tops = Tagesordnungspunkt::model()->findAllByAttributes(["sitzungstermin_id" => $termin_id, "antrag_id" => $baantrag_id]);
         } else {
             $alte_tops = Tagesordnungspunkt::model()->findAllByAttributes(["sitzungstermin_id" => $termin_id, "top_betreff" => $betreff]);
         }
         $alter_top = $this->loescheDoppelteTOPs($alte_tops);
         $tagesordnungspunkt_aenderungen = "";
         if ($alter_top) {
             if ($alter_top->sitzungstermin_id != $tagesordnungspunkt->sitzungstermin_id) {
                 $tagesordnungspunkt_aenderungen .= "Sitzung geändert: " . $alter_top->sitzungstermin_id . " => " . $tagesordnungspunkt->sitzungstermin_id . "\n";
             }
             if ($alter_top->sitzungstermin_datum != $tagesordnungspunkt->sitzungstermin_datum) {
                 $tagesordnungspunkt_aenderungen .= "Sitzungstermin geändert: " . $alter_top->sitzungstermin_datum . " => " . $tagesordnungspunkt->sitzungstermin_datum . "\n";
             }
             if ($alter_top->top_nr != $tagesordnungspunkt->top_nr) {
                 $tagesordnungspunkt_aenderungen .= "Position geändert: " . $alter_top->top_nr . " => " . $tagesordnungspunkt->top_nr . "\n";
             }
             if ($alter_top->top_ueberschrift != $tagesordnungspunkt->top_ueberschrift) {
                 $tagesordnungspunkt_aenderungen .= "Bereich geändert: " . $alter_top->top_ueberschrift . " => " . $tagesordnungspunkt->top_ueberschrift . "\n";
             }
             if ($alter_top->top_betreff != $tagesordnungspunkt->top_betreff) {
                 $tagesordnungspunkt_aenderungen .= "Betreff geändert: " . $alter_top->top_betreff . " => " . $tagesordnungspunkt->top_betreff . "\n";
             }
             if ($alter_top->antrag_id != $tagesordnungspunkt->antrag_id) {
                 $tagesordnungspunkt_aenderungen .= "Antrag geändert: " . $alter_top->antrag_id . " => " . $tagesordnungspunkt->antrag_id . "\n";
             }
             if ($alter_top->gremium_id != $tagesordnungspunkt->gremium_id) {
                 $tagesordnungspunkt_aenderungen .= "Gremium geändert: " . $alter_top->gremium_id . " => " . $tagesordnungspunkt->gremium_id . "\n";
             }
             if ($alter_top->gremium_name != $tagesordnungspunkt->gremium_name) {
                 $tagesordnungspunkt_aenderungen .= "Gremium geändert: " . $alter_top->gremium_name . " => " . $tagesordnungspunkt->gremium_name . "\n";
             }
             if ($alter_top->entscheidung != $tagesordnungspunkt->entscheidung) {
                 $tagesordnungspunkt_aenderungen .= "Entscheidung: " . $alter_top->entscheidung . " => " . $tagesordnungspunkt->entscheidung . "\n";
             }
             if ($alter_top->beschluss_text != $tagesordnungspunkt->beschluss_text) {
                 $tagesordnungspunkt_aenderungen .= "Beschluss: " . $alter_top->beschluss_text . " => " . $tagesordnungspunkt->beschluss_text . "\n";
             }
             if ($tagesordnungspunkt_aenderungen != "") {
                 $aend = new RISAenderung();
                 $aend->ris_id = $alter_top->id;
                 $aend->ba_nr = NULL;
                 $aend->typ = RISAenderung::$TYP_BA_ERGEBNIS;
                 $aend->datum = new CDbExpression("NOW()");
                 $aend->aenderungen = $tagesordnungspunkt_aenderungen;
                 if (!$aend->save()) {
                     var_dump($aend->getErrors());
                 }
                 $alter_top->copyToHistory();
                 $tagesordnungspunkt->id = $alter_top->id;
                 $alter_top->setAttributes($tagesordnungspunkt->getAttributes(), false);
                 if (!$alter_top->save()) {
                     echo "StadtratAntrag 1\n";
                     var_dump($alter_eintrag->getErrors());
                     die("Fehler");
                 }
                 $tagesordnungspunkt = $alter_top;
                 $aenderungen_tops .= "TOP geändert: " . $tagesordnungspunkt->top_nr . ": " . $tagesordnungspunkt->top_betreff . "\n   " . str_replace("\n", "\n   ", $tagesordnungspunkt_aenderungen) . "\n";
             }
         } else {
             $aenderungen_tops .= "Neuer TOP: " . $top_nr . " - " . $betreff . "\n";
             $tagesordnungspunkt->save();
         }
         $verwendete_top_betreffs[] = $tagesordnungspunkt->top_betreff;
         /*
         if (!is_null($vorlage_id)) {
             $html_vorlage_ergebnis = RISTools::load_file("http://www.ris-muenchen.de/RII/RII/ris_vorlagen_ergebnisse.jsp?risid=$vorlage_id");
             preg_match_all("/ris_sitzung_to.jsp\?risid=" . $termin_id . ".*<\/td>.*<\/td>.*tdborder\">(?<beschluss>.*)<\/td>/siU", $html_vorlage_ergebnis, $matches3);
             $beschluss = static::text_clean_spaces($matches3["beschluss"][0]);
             if ($tagesordnungspunkt->beschluss_text != $beschluss) {
                 $aenderungen .= "Beschluss: " . $tagesordnungspunkt->beschluss_text . " => " . $beschluss . "\n";
                 $tagesordnungspunkt->beschluss_text = $beschluss;
             }
         }
         */
         preg_match("/<a title=\"(?<title>[^\"]*)\" [^>]*href=\"(?<url>[^ ]+)\"/siU", $entscheidung_original, $matches2);
         if (isset($matches2["url"]) && $matches2["url"] != "" && $matches2["url"] != "/RII/RII/DOK/TOP/") {
             $aenderungen .= Dokument::create_if_necessary(Dokument::$TYP_BA_BESCHLUSS, $tagesordnungspunkt, ["url" => $matches2["url"], "name" => $matches2["title"], "name_title" => ""]);
         }
     }
     foreach ($bisherige_tops as $top) {
         if (!in_array($top->top_betreff, $verwendete_top_betreffs)) {
             $aenderungen_tops .= "TOP entfernt: " . $top->top_nr . ": " . $top->top_betreff . "\n";
             foreach ($top->dokumente as $dok) {
                 $dok->tagesordnungspunkt_id = null;
                 $dok->save(false);
             }
             $top->delete();
         }
     }
     if ($aenderungen_tops != "") {
         $changed = true;
     }
     if ($changed) {
         if (!$alter_eintrag) {
             $aenderungen = "Neu angelegt\n";
         }
         $aenderungen .= $aenderungen_tops;
         echo "BA-Termin {$termin_id}: Verändert: " . $aenderungen . "\n";
         if ($alter_eintrag) {
             $alter_eintrag->copyToHistory();
             $alter_eintrag->setAttributes($daten->getAttributes());
             if (!$alter_eintrag->save()) {
                 if (SITE_CALL_MODE != "cron") {
                     echo "BA-Termin 1\n";
                 }
                 var_dump($alter_eintrag->getErrors());
                 die("Fehler");
             }
             $daten = $alter_eintrag;
         } else {
             if (!$daten->save()) {
                 if (SITE_CALL_MODE != "cron") {
                     echo "BA-Termin 2\n";
                 }
                 var_dump($daten->getErrors());
                 die("Fehler");
             }
         }
     }
     foreach ($dokumente as $dok) {
         $aenderungen .= Dokument::create_if_necessary(Dokument::$TYP_BA_TERMIN, $daten, $dok);
     }
     if ($aenderungen != "") {
         $aend = new RISAenderung();
         $aend->ris_id = $daten->id;
         $aend->ba_nr = $daten->ba_nr;
         $aend->typ = RISAenderung::$TYP_BA_TERMIN;
         $aend->datum = new CDbExpression("NOW()");
         $aend->aenderungen = $aenderungen;
         $aend->save();
         /** @var Termin $termin */
         $termin = Termin::model()->findByPk($termin_id);
         $termin->datum_letzte_aenderung = new CDbExpression('NOW()');
         // Auch bei neuen Dokumenten
         $termin->save();
     }
 }