ajout script d'analyse des v...
|
1 |
#!/bin/bash |
2 | ||
fix info parfois manquante s...
|
3 |
set -e |
4 | ||
n'autorise qu'une seule exéc...
|
5 |
# on n'autorise qu'une seule exécution à la fois |
6 |
process_token=$(mktemp --dry-run /dev/shm/XXXXXXXXXXXXXXXX) |
|
7 |
token_file="$process_token.${0##*/}" |
|
8 | ||
améliore la récupération des...
|
9 |
for tool in sqlite3 getopt mktemp w3m jq; do |
complète re-écriture
|
10 |
which $tool > /dev/null 2>&1 || { |
11 |
echo missing tool $tool |
|
12 |
exit 1 |
|
13 |
} |
|
plus de souplesse dans les p...
|
14 |
done |
15 | ||
ajout possibilité de compare...
|
16 |
IFS_=$IFS |
17 | ||
amélioration code
|
18 |
function sqlite_request () { |
améliore la récupération des...
|
19 |
sqlite3 ${2:+-cmd} ${2:+".mode $2"} "$in_ram_database" <<< "$1" |
amélioration code
|
20 |
} |
21 | ||
complète re-écriture
|
22 |
function create_database () { |
améliore la récupération des...
|
23 |
sqlite_request "create table if not exists dossiers (id integer primary key, titre text, url text)" |
24 |
sqlite_request "create table if not exists votes (id integer primary key, nom text)" |
|
25 |
sqlite_request "create table if not exists députés (id integer primary key, nom text, groupe integer, date text)" |
|
26 |
sqlite_request "create table if not exists groupes (id integer primary key, nom text unique, nom_court text)" |
|
27 |
sqlite_request "create table if not exists scrutins (num integer primary key, séance text, date text not null, intitulé text non null, adoption boolean, dossier integer, mise_au_point text)" |
|
28 |
sqlite_request "create table if not exists dépouillements (scrutin integer not null, député integer not null, vote integer not null)" |
|
29 |
sqlite_request "create unique index if not exists 'index_députés' on députés (nom, groupe)" |
|
30 |
sqlite_request "create unique index if not exists 'index_dossiers' on dossiers (titre, url)" |
|
31 |
sqlite_request "create unique index if not exists 'index_dépouillements' on dépouillements (député, scrutin)" |
|
complète re-écriture
|
32 | |
33 |
for v in Pour Contre Abstention Non-votant; do |
|
améliore la récupération des...
|
34 |
sqlite_request "insert or ignore into votes (nom) values ('$v')" |
ajout script d'analyse des v...
|
35 |
done |
complète re-écriture
|
36 |
} |
ajout script d'analyse des v...
|
37 | |
complète re-écriture
|
38 |
function update_database () { |
39 |
test "$no_db_update" = $true_flag && return |
|
40 |
tempfile="/dev/shm/scrutin.$$" |
|
41 |
progress=0 |
|
améliore la récupération des...
|
42 |
for r in "${!acronymes[@]}"; do |
43 |
sqlite_request "update groupes set nom_court = \"${acronymes[$r]}\" where nom = \"$r\"" |
|
44 |
done |
|
45 |
sqlite_request "create table if not exists dossier_par_scrutin (scrutin integer, url text)" |
|
46 |
echo "récupération des dossiers" |
|
47 |
wget -qO- "https://www.assemblee-nationale.fr/dyn/$mandature/dossiers" \ |
|
48 |
| sed -rn 's/<p class="m-0"><a title="Accéder au dossier législatif" href="([^"]+)">([^<]+)<.+$/\1 \2/p' \ |
|
49 |
| sed -r "s/^[[:space:]]*//; s/'/'/g" \ |
|
50 |
| awk -v dq='"' '{ |
|
51 |
printf("insert or ignore into dossiers (titre, url) values (%s, %s);\n", dq gensub($1 " ", "", "1", $0) dq, dq "https://www.assemblee-nationale.fr" $1 dq) |
|
52 |
}' > $tempfile |
|
53 |
sqlite3 "$in_ram_database" < $tempfile |
|
fix bug sur premier scrutin
|
54 |
first_=$first |
améliore la récupération des...
|
55 |
first=$(sqlite_request "select max(num) from scrutins") |
complète re-écriture
|
56 |
if test ${first:-0} -lt $last; then |
57 |
echo "récupération des scrutins n°$((${first:-0}+1)) à n°$last dans "$database" (à conserver autant que possible)" >&2 |
|
ajout script d'analyse des v...
|
58 | |
complète re-écriture
|
59 |
test $((last % 100)) -ne 0 && last_offset=0 |
fix dossiers manquants
|
60 |
IFS=$' \t\n' |
complète re-écriture
|
61 |
for offset in $(seq $((last - 100)) -100 ${first:-0} ) $last_offset; do |
sélection possible de la man...
|
62 |
wget -qO- "http://www2.assemblee-nationale.fr/scrutins/liste/(offset)/$offset/(legislature)/$mandature/(type)/TOUS/(idDossier)/TOUS" \ |
améliore la récupération des...
|
63 |
| awk -v dq='"' ' |
64 |
BEGIN { |
|
65 |
} |
|
complète re-écriture
|
66 |
/<td class="denom">/ { |
améliore la récupération des...
|
67 |
scrutin = gensub(/^.+denom.>([[:digit:]]+)\\*?<.td./,"\\1","1",$0) |
complète re-écriture
|
68 |
} |
améliore la récupération des...
|
69 |
/<td class="desc">/ { |
70 |
if (match($0, ">dossier<") > 0) |
|
71 |
dossier[scrutin] = gensub(/^.+.<a href="([^"]+)">dossier<.a>.*$/,"\\1","1",$0) |
|
complète re-écriture
|
72 |
} |
73 |
END { |
|
améliore la récupération des...
|
74 |
for (i in dossier) { |
75 |
printf("insert into dossier_par_scrutin (scrutin, url) values (%i, %s);\n", i, dq dossier[i] dq) |
|
76 |
} |
|
77 |
}' > $tempfile |
|
78 |
sqlite3 "$in_ram_database" < $tempfile |
|
complète re-écriture
|
79 |
done |
80 | ||
améliore la récupération des...
|
81 | |
82 |
# IFS=$'\n' |
|
complète re-écriture
|
83 |
begin=$(date +%s) |
84 |
for scrutin in $(seq $((${first:-0}+1)) $last); do |
|
améliore la récupération des...
|
85 |
w3m -cols 512 -dump "http://www2.assemblee-nationale.fr/scrutins/detail/(legislature)/$mandature/(num)/$scrutin" \ |
86 |
| sed -n '/^Analyse du scrutin n° /,/^Votes des groupes/{/^Navigation/,/^ • Non inscrits/d;/^[[:space:]]*$/d;p}' \ |
|
87 |
| awk -v sq="'" -v dq='"' ' |
|
88 |
BEGIN { adoption = -1; map = 0 } |
|
89 |
/^Analyse du scrutin/ { scrutin = $NF } |
|
90 |
/séance du [0-3][0-9]\/[01][0-9]\/(19|20)[0-9]+/ { date = $NF; seance = $1 } |
|
91 |
/^Scrutin public sur / { titre = gensub("^Scrutin public sur l[ae" sq "]s? ?", "", "1") } |
|
92 |
/^L.Assemblée .+ adopté/ { adoption = NF == 3 } |
|
93 |
/^Nombre de votants :/ { votants = $NF } |
|
94 |
/^Nombre de suffrages exprimés :/ { exprimes = $NF } |
|
95 |
/^Majorité absolue :/ { majo_absolue = $NF } |
|
96 |
/^Pour l.adoption :/ { pour = $NF } |
|
97 |
/^Contre :/ { contre = $NF } |
|
98 |
/^Groupe / { groupe = gensub("^Groupe (.+) \\([1-9].+$", "\\1", "1") |
|
99 |
groupe = gensub("^(la|les|le|l" sq "|du|des|de|de la|d" sq ") ", "", "1", groupe) |
|
100 |
} |
|
101 |
/^Non inscrits/ { groupe = "Non inscrits" } |
|
102 |
/^(Pour|Abstention|Contre):/ { position = gensub(":", "", "1", $1) } |
|
103 |
/^Non-votants?:/ { |
|
104 |
position = gensub("s?:", "", "1", $1) |
|
105 |
nvl = "" |
|
non-votant dans le dernier g...
|
106 |
while ($1 != "Groupe" || $0 != "Contenus annexes") { |
améliore la récupération des...
|
107 |
getline |
non-votant dans le dernier g...
|
108 |
if ($1 == "Groupe" || $0 == "Contenus annexes") |
améliore la récupération des...
|
109 |
break |
110 |
nvl = nvl $0 |
|
111 |
} |
|
112 |
f = split(nvl, nv, "(, | et )") |
|
113 |
for (i=1; i<=f; i++) { |
|
114 |
votes[groupe][position][gensub("(^ +|M\\. |Mme |Mlle | \\(.+)", "", "g", nv[i])]++ |
|
115 |
} |
|
116 |
groupe = gensub("^Groupe (.+) \\([1-9].+$", "\\1", "1") |
|
117 |
} |
|
le point médian n'est pas da...
|
118 |
/^ • / { votes[groupe][position][gensub("^[^A-Z]*", "", "1")]++ } |
améliore la récupération des...
|
119 |
/^Mises au point/,/^Votes des groupes/ { if ($1 != "(Sous") mises_au_point[map++] = $0 } |
120 |
END { |
|
121 |
if (adoption < 0) |
|
122 |
adoption = pour >= majo_absolue |
|
123 | ||
124 |
for (i=1; i<map-1; i++) |
|
125 |
mise_au_point = sprintf("%s[%s]", mise_au_point, mises_au_point[i]) |
|
126 | ||
127 |
printf("insert into scrutins (num, séance, date, intitulé, adoption, mise_au_point) values (%i, %s, %s, %s, %i, %s);\n", |
|
128 |
scrutin, |
|
129 |
sq seance sq, |
|
130 |
sq date sq, |
|
131 |
dq gensub(dq, dq dq, "g", titre) dq, |
|
132 |
adoption, |
|
133 |
dq gensub(dq, dq dq, "g", mise_au_point) dq, |
|
134 |
scrutin) |
|
135 |
printf("update scrutins set dossier = ( select id from dossiers inner join dossier_par_scrutin where dossiers.url = dossier_par_scrutin.url and dossier_par_scrutin.scrutin = %i) where num = %i;\n", |
|
136 |
scrutin, |
|
137 |
scrutin) |
|
138 |
for (groupe in votes) { |
|
139 |
printf("insert or ignore into groupes (nom) values (%s);\n", dq groupe dq) |
|
140 |
for (position in votes[groupe]) { |
|
141 |
for (nom in votes[groupe][position]) { |
|
142 |
if (nom !~ " \\(.+\\) *$") |
|
143 |
printf("insert or ignore into députés (nom, groupe, date) select %s, id, %s from groupes where nom = %s;\n", |
|
144 |
dq nom dq, |
|
145 |
dq date dq, |
|
146 |
dq groupe dq) |
|
147 |
printf("insert or ignore into dépouillements (scrutin, député, vote) select %i, députés.id, votes.id from députés inner join votes where députés.nom = %s and votes.nom = %s;\n", |
|
148 |
scrutin, |
|
149 |
dq nom dq, |
|
150 |
dq position dq) |
|
151 |
} |
|
152 |
} |
|
153 |
} |
|
154 |
} |
|
155 |
' > $tempfile |
|
156 |
sqlite3 "$in_ram_database" < $tempfile |
|
écriture directe en feuille ...
|
157 | |
complète re-écriture
|
158 | |
améliore la sortie de progre...
|
159 |
if test $(( ($scrutin - ${first:-0}) * 100 / ( $last - ${first:-0} ) )) -ne ${progress:-0}; then |
160 |
progress=$(( ($scrutin - ${first:-0}) * 100 / ( $last - ${first:-0} ) )) |
|
complète re-écriture
|
161 |
if test $(($progress % ${update_progress:-1})) -eq 0; then |
162 |
now=$(date +%s) |
|
163 |
delta=$(( $now - $begin )) |
|
améliore la sortie de progre...
|
164 |
# scrutin = {first:-0}+1 à la première itération |
165 |
printf "\r%d%%, ETA %s" $progress $(date +%H:%M:%S -d "$(($delta * ($last - $scrutin) / ($scrutin - ${first:-0}) )) seconds") |
|
complète re-écriture
|
166 |
fi |
167 |
fi |
|
168 |
done |
|
améliore la récupération des...
|
169 |
sqlite_request 'drop table dossier_par_scrutin' |
170 | ||
améliore la sortie de progre...
|
171 |
echo -e "\r\033[KTerminé: $(($scrutin - ${first:-0} - 1)) scrutins ajoutés" |
améliore la récupération des...
|
172 |
rm -f "$tempfile" |
complète re-écriture
|
173 |
fi |
fix bug sur premier scrutin
|
174 |
first=$first_ |
complète re-écriture
|
175 |
} |
176 | ||
177 |
function write_comparaison () { |
|
multiples modifications
|
178 |
result="scrutins ($(sum <<< "${groupe[@]}" | cut -b1-5))${dossier:+ - ${dossier}}" |
ajout de l'envoi du résultat...
|
179 |
if test "$envoi_par_mail" = $true_flag; then |
180 |
result="scrutins" |
|
181 |
fi |
|
complète re-écriture
|
182 |
content="/dev/shm/$result/content.xml" |
multiples modifications
|
183 |
id_cols=(Scrutin Date Séance Titre Adoption Dossier) |
changement de style de sorti...
|
184 |
declare -A style=(["Pour"]=Good ["Contre"]=Bad ["Abstention"]=Neutral ["oui"]=Good ["non"]=Bad) |
améliore le fichier de sorti...
|
185 |
eval $(sqlite_request 'select printf("typevotes[%i]=%s;", id, nom) from votes') |
changement de style de sorti...
|
186 |
nb_cols=$(( ${#id_cols[@]} + ${#groupe[@]} )) |
multiples modifications
|
187 |
colors=($(awk -v n=${#groupe[@]} -v from=${from_color:-2A0636} -v to=${to_color:-D09B8A} ' |
188 |
function rgbL (p) { |
|
189 |
r = rgb_from[1] + p * (rgb_to[1] - rgb_from[1]) |
|
190 |
g = rgb_from[2] + p * (rgb_to[2] - rgb_from[2]) |
|
191 |
b = rgb_from[3] + p * (rgb_to[3] - rgb_from[3]) |
|
192 |
L = r * 0.299 + g * 0.587 + b * 0.114 |
|
193 |
printf("%02x%02x%02x:%s\n", int(r), int(g), int(b), L > 185 ? "000000" : "ffffff") |
|
194 |
} |
|
195 |
BEGIN { |
|
196 |
for (i = split(gensub("(..)(..)(..)", "\\1,\\2,\\3", "1", from), rgb_from, ","); i > 0; i--) |
|
197 |
rgb_from[i] = strtonum(sprintf("%d", strtonum("0x" rgb_from[i]))) |
|
198 |
for (i = split(gensub("(..)(..)(..)", "\\1,\\2,\\3", "1", to), rgb_to, ","); i > 0; i--) |
|
199 |
rgb_to[i] = strtonum(sprintf("%d", strtonum("0x" rgb_to[i]))) |
|
200 | ||
201 |
print "pour_bash_array_qui_commence_a_index_0" |
|
202 |
rgbL(0) |
|
203 |
for (i = 1; i < n-1; i++) { |
|
204 |
rgbL(i/n) |
|
205 |
} |
|
206 |
if (n > 1) rgbL(1) |
|
207 |
} |
|
208 |
')) |
|
changement de style de sorti...
|
209 |
function get_colname () { |
210 |
awk -v n=$1 ' |
|
211 |
BEGIN{ |
|
212 |
printf("%c%c", n < 27 ? "" : int(n/26) + 64, (n % 26) + (n % 26 == 0 ? 26 : 0) + 64) |
|
213 |
}' | tr -d '\0' |
|
214 |
} |
|
simplification écriture des ...
|
215 |
function write_cell () { |
changement de style de sorti...
|
216 |
cell='<table:table-cell office:value-type=' |
simplification écriture des ...
|
217 |
case $1 in |
218 |
url) |
|
changement de style de sorti...
|
219 |
cell+='"string" calcext:value-type="string">' |
améliore le fichier de sorti...
|
220 |
cell+="<text:p><text:a xlink:href=$2 xlink:type=\"simple\">$3</text:a></text:p>" |
221 |
;; |
|
simplification écriture des ...
|
222 |
texte) |
changement de style de sorti...
|
223 |
cell+='"string" calcext:value-type="string"'${style[${2:- }]:+ table:style-name=\"${style[$2]}\"}'>' |
224 |
cell+="<text:p>${2:- }</text:p>" |
|
simplification écriture des ...
|
225 |
;; |
226 |
nombre) |
|
changement de style de sorti...
|
227 |
cell+='"float" office:value="'$2'" calcext:value-type="float">' |
simplification écriture des ...
|
228 |
cell+="<text:p>$2</text:p>" |
229 |
;; |
|
changement de style de sorti...
|
230 |
formule) |
231 |
cell+='"string" table:formula="of:='"$2"'" calcext:value-type="string"'${3:+ table:style-name=\"${3}\"}'>' |
|
232 |
;; |
|
simplification écriture des ...
|
233 |
*) |
234 |
return 1;; |
|
235 |
esac |
|
236 |
cell+='</table:table-cell>' |
|
237 |
echo $cell >> "$content" |
|
238 |
} |
|
complète re-écriture
|
239 | |
ajout de l'envoi du résultat...
|
240 |
if test -z "$envoi_par_mail"; then |
241 |
echo "génération du fichier $result" |
|
242 |
fi |
|
complète re-écriture
|
243 | |
244 |
mkdir -p "/dev/shm/$result/META-INF" |
|
245 | ||
246 |
cat > "/dev/shm/$result/META-INF/manifest.xml" << EOmetainf |
|
écriture directe en feuille ...
|
247 |
<?xml version="1.0" encoding="UTF-8"?> |
248 |
<manifest:manifest xmlns:manifest="urn:oasis:names:tc:opendocument:xmlns:manifest:1.0" manifest:version="1.2"> |
|
249 |
<manifest:file-entry manifest:full-path="/" manifest:version="1.2" manifest:media-type="application/vnd.oasis.opendocument.spreadsheet"/> |
|
250 |
<manifest:file-entry manifest:full-path="content.xml" manifest:media-type="text/xml"/> |
|
fixe la première ligne et le...
|
251 |
<manifest:file-entry manifest:full-path="settings.xml" manifest:media-type="text/xml"/> |
écriture directe en feuille ...
|
252 |
</manifest:manifest> |
253 |
EOmetainf |
|
254 | ||
fixe la première ligne et le...
|
255 |
cat > "/dev/shm/$result/settings.xml" << EOsettings |
256 |
<?xml version="1.0" encoding="UTF-8"?> |
|
257 |
<office:document-settings xmlns:config="urn:oasis:names:tc:opendocument:xmlns:config:1.0" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:ooo="http://openoffice.org/2004/office" xmlns:office="urn:oasis:names:tc:opendocument:xmlns:office:1.0" office:version="1.3"> |
|
258 |
<office:settings> |
|
259 |
<config:config-item-set config:name="ooo:view-settings"> |
|
260 |
<config:config-item-map-indexed config:name="Views"> |
|
261 |
<config:config-item-map-entry> |
|
262 |
<config:config-item config:name="ViewId" config:type="string">view1</config:config-item> |
|
263 |
<config:config-item-map-named config:name="Tables"> |
|
264 |
<config:config-item-map-entry config:name="$result"> |
|
265 |
<config:config-item config:name="HorizontalSplitMode" config:type="short">2</config:config-item> |
|
266 |
<config:config-item config:name="VerticalSplitMode" config:type="short">2</config:config-item> |
|
267 |
<config:config-item config:name="HorizontalSplitPosition" config:type="int">${#id_cols[@]}</config:config-item> |
|
268 |
<config:config-item config:name="VerticalSplitPosition" config:type="int">1</config:config-item> |
|
269 |
<config:config-item config:name="ActiveSplitRange" config:type="short">1</config:config-item> |
|
270 |
<config:config-item config:name="PositionLeft" config:type="int">0</config:config-item> |
|
271 |
<config:config-item config:name="PositionRight" config:type="int">${#id_cols[@]}</config:config-item> |
|
272 |
<config:config-item config:name="PositionTop" config:type="int">0</config:config-item> |
|
273 |
<config:config-item config:name="PositionBottom" config:type="int">1</config:config-item> |
|
274 |
</config:config-item-map-entry> |
|
275 |
</config:config-item-map-named> |
|
276 |
</config:config-item-map-entry> |
|
277 |
</config:config-item-map-indexed> |
|
278 |
</config:config-item-set> |
|
279 |
</office:settings> |
|
280 |
</office:document-settings> |
|
281 |
EOsettings |
|
282 | ||
complète re-écriture
|
283 |
printf 'application/vnd.oasis.opendocument.spreadsheet' > "/dev/shm/$result/mimetype" |
écriture directe en feuille ...
|
284 | |
complète re-écriture
|
285 |
echo '<?xml version="1.0" encoding="UTF-8"?>' > "$content" |
écriture directe en feuille ...
|
286 | |
complète re-écriture
|
287 |
cat >> "$content" << EOcontent |
288 |
<office:document-content xmlns:office="urn:oasis:names:tc:opendocument:xmlns:office:1.0" xmlns:style="urn:oasis:names:tc:opendocument:xmlns:style:1.0" xmlns:text="urn:oasis:names:tc:opendocument:xmlns:text:1.0" xmlns:table="urn:oasis:names:tc:opendocument:xmlns:table:1.0" xmlns:draw="urn:oasis:names:tc:opendocument:xmlns:drawing:1.0" xmlns:fo="urn:oasis:names:tc:opendocument:xmlns:xsl-fo-compatible:1.0" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:meta="urn:oasis:names:tc:opendocument:xmlns:meta:1.0" xmlns:number="urn:oasis:names:tc:opendocument:xmlns:datastyle:1.0" xmlns:presentation="urn:oasis:names:tc:opendocument:xmlns:presentation:1.0" xmlns:svg="urn:oasis:names:tc:opendocument:xmlns:svg-compatible:1.0" xmlns:chart="urn:oasis:names:tc:opendocument:xmlns:chart:1.0" xmlns:dr3d="urn:oasis:names:tc:opendocument:xmlns:dr3d:1.0" xmlns:math="http://www.w3.org/1998/Math/MathML" xmlns:form="urn:oasis:names:tc:opendocument:xmlns:form:1.0" xmlns:script="urn:oasis:names:tc:opendocument:xmlns:script:1.0" xmlns:ooo="http://openoffice.org/2004/office" xmlns:ooow="http://openoffice.org/2004/writer" xmlns:oooc="http://openoffice.org/2004/calc" xmlns:dom="http://www.w3.org/2001/xml-events" xmlns:xforms="http://www.w3.org/2002/xforms" xmlns:xsd="http://www.w3.org/2001/XMLSchema" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:rpt="http://openoffice.org/2005/report" xmlns:of="urn:oasis:names:tc:opendocument:xmlns:of:1.2" xmlns:xhtml="http://www.w3.org/1999/xhtml" xmlns:grddl="http://www.w3.org/2003/g/data-view#" xmlns:tableooo="http://openoffice.org/2009/table" xmlns:drawooo="http://openoffice.org/2010/draw" xmlns:calcext="urn:org:documentfoundation:names:experimental:calc:xmlns:calcext:1.0" xmlns:loext="urn:org:documentfoundation:names:experimental:office:xmlns:loext:1.0" xmlns:field="urn:openoffice:names:experimental:ooo-ms-interop:xmlns:field:1.0" xmlns:formx="urn:openoffice:names:experimental:ooxml-odf-interop:xmlns:form:1.0" xmlns:css3t="http://www.w3.org/TR/css3-text/" office:version="1.2"> |
|
289 |
<office:scripts/> |
|
290 |
<office:font-face-decls> |
|
291 |
<style:font-face style:name="Liberation Sans" svg:font-family="'Liberation Sans'" style:font-family-generic="swiss" style:font-pitch="variable"/> |
|
292 |
<style:font-face style:name="DejaVu Sans" svg:font-family="'DejaVu Sans'" style:font-family-generic="system" style:font-pitch="variable"/> |
|
293 |
<style:font-face style:name="FreeSans" svg:font-family="FreeSans" style:font-family-generic="system" style:font-pitch="variable"/> |
|
294 |
</office:font-face-decls> |
|
295 |
<office:automatic-styles> |
|
296 |
EOcontent |
|
297 | ||
ajout possibilité de compare...
|
298 |
IFS=$'\n' |
complète re-écriture
|
299 |
for i in $(seq $nb_cols); do |
300 |
cat >> "$content" << EOcontent |
|
301 |
<style:style style:name="co$i" style:family="table-column"> |
|
302 |
<style:table-column-properties fo:break-before="auto" style:column-width="30.00mm"/> |
|
303 |
</style:style> |
|
écriture directe en feuille ...
|
304 |
EOcontent |
complète re-écriture
|
305 |
done |
écriture directe en feuille ...
|
306 | |
307 |
cat >> "$content" << EOcontent |
|
complète re-écriture
|
308 |
<style:style style:name="ro1" style:family="table-row"> |
309 |
<style:table-row-properties style:row-height="4.52mm" fo:break-before="auto" style:use-optimal-row-height="true"/> |
|
310 |
</style:style> |
|
311 |
<style:style style:name="ta1" style:family="table" style:master-page-name="Default"> |
|
312 |
<style:table-properties table:display="true" style:writing-mode="lr-tb"/> |
|
313 |
</style:style> |
|
changement de style de sorti...
|
314 |
<style:style style:name="T1" style:family="text"> |
315 |
<style:text-properties fo:font-weight="bold" style:font-weight-asian="bold" style:font-weight-complex="bold" fo:color="#5eb91e"/> |
|
316 |
</style:style> |
|
317 |
<style:style style:name="T2" style:family="text"> |
|
318 |
<style:text-properties fo:font-weight="bold" style:font-weight-asian="bold" style:font-weight-complex="bold" fo:color="#c9211e"/> |
|
319 |
</style:style> |
|
320 |
<style:style style:name="T3" style:family="text"> |
|
321 |
<style:text-properties fo:font-weight="bold" style:font-weight-asian="bold" style:font-weight-complex="bold" fo:color="#e8a202"/> |
|
322 |
</style:style> |
|
multiples modifications
|
323 |
EOcontent |
324 | ||
325 |
for i in $(seq ${#groupe[@]}); do |
|
326 |
cat >> "$content" << EOcontent |
|
changement de style de sorti...
|
327 |
<style:style style:name="groupe$i" style:family="table-cell" style:parent-style-name="Default"> |
multiples modifications
|
328 |
<style:table-cell-properties fo:wrap-option="wrap" style:vertical-align="middle" fo:background-color="#${colors[$i]%:*}"/> |
329 |
<style:text-properties fo:hyphenate="false" fo:color="#${colors[$i]}"/> |
|
330 |
</style:style> |
|
331 |
EOcontent |
|
332 |
done |
|
333 | ||
334 |
cat >> "$content" << EOcontent |
|
complète re-écriture
|
335 |
</office:automatic-styles> |
336 |
<office:body> |
|
337 |
<office:spreadsheet> |
|
338 |
<table:calculation-settings table:automatic-find-labels="false"/> |
|
339 |
<table:table table:name="$result" table:style-name="ta1"> |
|
340 |
<office:forms form:automatic-focus="false" form:apply-design-mode="false"/> |
|
améliore le fichier de sorti...
|
341 |
<table:table-column table:style-name="co1" table:number-columns-repeated="${#id_cols[@]}" table:default-cell-style-name="Default"/> |
écriture directe en feuille ...
|
342 |
EOcontent |
343 | ||
changement de style de sorti...
|
344 |
for g in $(seq ${#groupe[@]}); do |
345 |
cat >> "$content" << EOcontent |
|
346 |
<table:table-column table:style-name="co1" table:default-cell-style-name="ce$g"/> |
|
ajout possibilité de compare...
|
347 |
EOcontent |
complète re-écriture
|
348 |
done |
349 |
echo '<table:table-row table:style-name="ro1">' >> "$content" |
|
écriture directe en feuille ...
|
350 | |
ajout possibilité de compare...
|
351 |
IFS=$IFS_ |
améliore le fichier de sorti...
|
352 |
for colonne in ${id_cols[@]}; do |
simplification écriture des ...
|
353 |
write_cell texte $colonne |
complète re-écriture
|
354 |
done |
écriture directe en feuille ...
|
355 | |
changement de style de sorti...
|
356 |
for (( g=0; g<${#groupe[@]}; g++ )); do |
357 |
colname=$(get_colname $(( ${#id_cols[@]} + $g + 1)) ) |
|
358 |
write_cell formule "COM.MICROSOFT.CONCAT("${groupe[$g]} ("; $(($last-$first+1))-COUNTIF([.${colname}2:.${colname}$(($last-$first+2))];" "); ")")" groupe$(($g+1)) |
|
complète re-écriture
|
359 |
done |
360 | ||
361 |
echo '</table:table-row>' >> "$content" |
|
362 | ||
363 |
progress=0 |
|
364 |
begin=$(date +%s) |
|
365 |
line=1 |
|
améliore progression
|
366 |
test -z "$seq" && qty=$(( $last - $first )) |
ajout possibilité de compare...
|
367 |
IFS=$'\n' |
améliore le fichier de sorti...
|
368 |
scrutin_base_url="https://www2.assemblee-nationale.fr/scrutins/detail/(legislature)/$mandature/(num)/" |
complète re-écriture
|
369 |
for scrutin in $(eval ${seq:-seq $first $last}); do |
370 | ||
améliore le fichier de sorti...
|
371 |
data=$(sqlite_request "select date,séance,intitulé,adoption,dossiers.url,dossiers.titre from scrutins left join dossiers on scrutins.dossier = dossiers.id where num is $scrutin" json) |
372 |
date=$(jq -r '.[].date' <<< $data) |
|
373 |
seance=$(jq -r '.[]."séance"' <<< $data) |
|
374 |
title=$(jq -r '.[]."intitulé" | @html' <<< $data) |
|
375 |
adoption=$(jq '.[].adoption' <<< $data) |
|
376 |
dossier_url=$(jq '.[].url' <<< $data) |
|
377 |
dossier_texte=$(jq -r '.[].titre | @html' <<< $data) |
|
complète re-écriture
|
378 |
test $adoption -eq 1 && adoption='oui' || adoption='non' |
groupe de référence: GDR
|
379 | |
simplification écriture des ...
|
380 |
echo '<table:table-row table:style-name="ro1">' >> "$content" |
381 | ||
améliore le fichier de sorti...
|
382 |
write_cell url "\"$scrutin_base_url$scrutin\"" $scrutin |
simplification écriture des ...
|
383 |
write_cell texte "$date" |
améliore le fichier de sorti...
|
384 |
write_cell texte "$seance" |
385 |
write_cell texte "$title" |
|
simplification écriture des ...
|
386 |
write_cell texte "$adoption" |
multiples modifications
|
387 |
write_cell url "${dossier_url/#null/\"\"}" "${dossier_texte/#null}" |
ajoute colonnes loyauté, pan...
|
388 | |
multiples modifications
|
389 |
unset votes |
changement de style de sorti...
|
390 |
for (( g = 0; g < ${#groupe[@]}; g++ )); do |
391 |
case ${id_groupe[$g]%:*} in |
|
392 |
groupes) |
|
393 |
unset _vote |
|
394 |
eval $(sqlite_request "select '_vote[' || vote || ']=' || count(vote) from dépouillements |
|
395 |
where scrutin = $scrutin and député in ( |
|
396 |
select id from députés |
|
397 |
where groupe in (${id_groupe[$g]#*:}) |
|
398 |
) |
|
399 |
group by vote") |
|
400 |
if test ${#_vote[@]} -gt 0; then |
|
401 |
unset _votes |
|
402 |
for i in {1..3}; do |
|
403 |
_votes+="<text:span text:style-name=\"T$i\">${_vote[$i]:-0}</text:span> / " |
|
404 |
done |
|
405 |
_votes+="${_vote[4]:-0}" |
|
406 |
votes[${#votes[@]}]=$_votes |
|
407 |
else |
|
408 |
votes[${#votes[@]}]=" " |
|
409 |
fi |
|
410 |
;; |
|
411 |
députés) |
|
412 |
votes[${#votes[@]}]=$(sqlite_request "select nom from votes |
|
413 |
where id in ( |
|
414 |
select vote from dépouillements |
|
415 |
where scrutin = $scrutin and député in (${id_groupe[$g]#*:}) |
|
416 |
)") |
|
417 |
;; |
|
418 |
esac |
|
multiples modifications
|
419 |
done |
420 |
for ((i = 0; i < ${#votes[@]}; i ++)); do |
|
changement de style de sorti...
|
421 |
write_cell texte ${votes[$i]} |
ajout possibilité de compare...
|
422 |
done |
complète re-écriture
|
423 |
echo '</table:table-row>' >> "$content" |
424 | ||
meilleur calcul progression
|
425 |
if test $(( ($line * 100) / ${qty:-$last} )) -ne $progress; then |
426 |
progress=$(( ($line * 100) / ${qty:-$last} )) |
|
427 |
if test $(( $progress % ${generation_progress:-5} )) -eq 0; then |
|
complète re-écriture
|
428 |
now=$(date +%s) |
429 |
delta=$(( $now - $begin )) |
|
améliore la sortie de progre...
|
430 |
printf "\r%d%%, ETA %s" $progress $(date +%H:%M:%S -d "$(( $delta * (${qty:-$last} - $line) / $line )) seconds") |
complète re-écriture
|
431 |
fi |
432 |
fi |
|
meilleur calcul progression
|
433 | |
434 |
let line++ |
|
435 | ||
ajout script d'analyse des v...
|
436 |
done |
complète re-écriture
|
437 | |
438 |
cat >> "$content" << EOcontent |
|
439 |
</table:table> |
|
440 |
<table:named-expressions/> |
|
441 |
<table:database-ranges> |
|
changement de style de sorti...
|
442 |
<table:database-range table:name="__Anonymous_Sheet_DB__0" table:target-range-address="'$result'.D1:'$result'.$(get_colname $nb_cols)$line" table:display-filter-buttons="true"/> |
complète re-écriture
|
443 |
</table:database-ranges> |
444 |
</office:spreadsheet> |
|
445 |
</office:body> |
|
446 |
</office:document-content> |
|
447 |
EOcontent |
|
448 | ||
449 |
( cd "/dev/shm/$result" && zip -r ../"$result" * > /dev/null 2>&1 && cd .. && rm -fr "$result" ) |
|
450 | ||
ajout de l'option de destina...
|
451 |
mv -f "/dev/shm/$result.zip" "${destination_path:+$destination_path/}$result.ods" |
complète re-écriture
|
452 | |
ajout de l'envoi du résultat...
|
453 |
if test -z "$envoi_par_mail"; then |
454 |
echo -e "\r\033[KTerminé : ${destination_path:+$destination_path/}$result.ods" |
|
455 |
fi |
|
complète re-écriture
|
456 |
} |
457 | ||
458 |
function save_database () { |
|
ne bloque pas inutilement (a...
|
459 |
rm -f "$token_file" |
améliore abandon
|
460 |
test -n "$result" -a -d "/dev/shm/$result" && rm -fr "/dev/shm/$result" |
améliore le trap
|
461 |
test -n "$database" -a -n "$in_ram_database" || return |
ajout de l'envoi du résultat...
|
462 |
if test "$envoi_par_mail" = $true_flag; then |
463 |
if test -n "$mailconfig_file" && test -r "$mailconfig_file"; then |
|
464 |
source "$mailconfig_file" |
|
465 |
elif test -r "/usr/local/etc/${0##*/}.mail.conf"; then |
|
466 |
source "/usr/local/etc/${0##*/}.mail.conf" |
|
467 |
fi |
|
468 |
stat -Lc "(date de mise à jour de la base: %x)" $database |
|
469 |
cat > $process_token.headers << EOC |
|
470 |
From: ${from_mail:?} |
|
471 |
To: $destinataire |
|
472 |
Subject: les scrutins demandés |
|
473 |
EOC |
|
474 |
curl_opt=( |
|
475 |
--url smtp://${smtp_address:?}:${smtp_port:?} |
|
476 |
--mail-rcpt $destinataire |
|
477 |
-H @$process_token.headers |
|
478 |
-F "=(;type=multipart/alternative" |
|
479 |
-F "=<$process_token.txt;encoder=quoted-printable" |
|
480 |
-F "=<$process_token.html;encoder=quoted-printable" |
|
481 |
-F "=)" |
|
482 |
) |
|
483 |
if test -r "${destination_path:+$destination_path/}$result.ods"; then |
|
484 |
curl_opt[${#curl_opt[@]}]="-F" |
|
485 |
curl_opt[${#curl_opt[@]}]="=@${destination_path:+$destination_path/}$result.ods;encoder=base64" |
|
486 |
fi |
|
487 |
exec 1>&- |
|
488 |
aha -f $process_token.mail -t "envoi automatisé" > $process_token.html |
|
489 |
w3m -dump $process_token.html > $process_token.txt |
|
490 |
curl ${curl_opt[@]} |
|
491 |
rm -f "${destination_path:+$destination_path/}$result.ods" $process_token* |
|
492 |
elif test -r "$database" && sqldiff=$(sqldiff $in_ram_database $database) && test -z "$sqldiff"; then |
|
améliore la sauvegarde de la...
|
493 |
echo "pas de modification" |
complète re-écriture
|
494 |
elif test -w "$database"; then |
améliore la sauvegarde de la...
|
495 |
rm -f "$database" |
496 |
sqlite_request '.dump' | sqlite3 "$database" |
|
497 |
echo "base de données $database mise à jour" |
|
498 |
elif test ! -e "$database" -a -w ${database%/*}; then |
|
499 |
sqlite_request '.dump' | sqlite3 "$database" |
|
500 |
echo "base de données $database créée" |
|
complète re-écriture
|
501 |
else |
améliore la sauvegarde de la...
|
502 |
echo "je ne peux rien faire avec $database !" |
complète re-écriture
|
503 |
fi |
ne bloque pas inutilement (a...
|
504 |
rm -f "$in_ram_database" "$tempfile" |
complète re-écriture
|
505 |
} |
506 | ||
factorisation
|
507 |
function dernier_scrutin_public () { |
sélection possible de la man...
|
508 |
wget -qO- "http://www2.assemblee-nationale.fr/scrutins/liste/(legislature)/$mandature/(type)/TOUS/(idDossier)/TOUS" \ |
corrige récupération du numé...
|
509 |
| sed -rn 's/^.*<td class="denom">([0-9]+)[^0-9].*$/\1/p' \ |
factorisation
|
510 |
| head -1 |
511 |
} |
|
512 | ||
complète re-écriture
|
513 |
trap save_database EXIT |
514 | ||
corrige la configuration écr...
|
515 |
test -z "$database" && database="${0}.db" |
516 | ||
fix configuration non sourcé...
|
517 |
echo "$0 $@" > $token_file |
corrige la configuration écr...
|
518 |
declare -A acronymes |
complète re-écriture
|
519 |
true_flag=$(mktemp --dry-run XXXXX) |
520 | ||
521 |
while [[ $# -gt 0 ]]; do |
|
522 |
case "$1" in |
|
523 |
"--no-db-update") |
|
ajout d'un message d'aide
|
524 |
#|ne met pas à jour la base de données |
multiples modifications
|
525 |
if test ${db_update_only:-OK} = $true_flag; then |
526 |
echo "option incompatible avec --db-update-only" |
|
527 |
exit 1 |
|
528 |
fi |
|
complète re-écriture
|
529 |
no_db_update=$true_flag;; |
530 |
"--db-update-only") |
|
ajout d'un message d'aide
|
531 |
#|ne génère pas de fichier de résultat |
multiples modifications
|
532 |
if test ${no_db_update:-OK} = $true_flag; then |
533 |
echo "option incompatible avec --no-db-update" |
|
534 |
exit 1 |
|
535 |
fi |
|
complète re-écriture
|
536 |
db_update_only=$true_flag;; |
multiples modifications
|
537 |
"--cible"|"-c") |
538 |
#<nom court du groupe>|ajoute les scrutins de ce groupe, de ce ou cette députée, les colonnes seront dans l'ordre |
|
fix nom avec apostrophe
|
539 |
_groupe[${#_groupe[@]}]="${2//\'/\'\'}" |
complète re-écriture
|
540 |
shift;; |
multiples modifications
|
541 |
"--couleurs") |
542 |
#<nombre hexadécimal>:<nombre hexadécimal>|colore les colonnes en dégradé entre les deux couleurs comprises |
|
543 |
if grep -iq '[^0-9A-F:]' <<< ${2:-ERROR}; then |
|
544 |
echo "$1 ${2:-ERROR}: format attendu <nombre>:<nombre>" |
|
545 |
exit 1 |
|
546 |
elif egrep -iq '[0-9A-F]{6}:[0-9A-F]{6}' <<< ${2:-ERROR}; then |
|
547 |
from_color=${2%:*} |
|
548 |
to_color=${2#*:} |
|
549 |
else |
|
550 |
echo erreur $2: couleur RGB au format hexadécimal demandé |
|
551 |
fi |
|
complète re-écriture
|
552 |
shift;; |
sélection possible de la man...
|
553 |
"--mandature") |
554 |
mandature="$2" |
|
555 |
;; |
|
multiples modifications
|
556 |
"--scrutin") |
557 |
#<nombre>[:<nombre>]|commence la génération du résultat pour le scrutin <nombre>, ou entre les deux nombres donnés |
|
558 |
if grep -q '[^0-9:]' <<< ${2:-ERROR}; then |
|
559 |
echo "$1 ${2:-ERROR}: format attendu <nombre>[:<nombre>]" |
|
560 |
exit 1 |
|
561 |
elif egrep -q '[1-9][0-9]*(:[1-9][0-9]*)?' <<< ${2:-ERROR}; then |
|
562 |
first=${2%:*} |
|
563 |
last=${2#*:} |
|
564 |
if test $first -gt $last; then |
|
565 |
last+=:$first |
|
566 |
first=${last%:*} |
|
567 |
last=${last#*:} |
|
568 |
fi |
|
569 |
else |
|
570 |
echo "$1 ${2:-ERROR}: <nombre> ne doit pas commencer par 0" |
|
571 |
exit 1 |
|
572 |
fi |
|
573 |
shift;; |
|
complète re-écriture
|
574 |
"--premier-scrutin") |
ajout d'un message d'aide
|
575 |
#<numéro>|commence la génération du résultat à partir du scrutin <numéro> |
complète re-écriture
|
576 |
first="$2" |
577 |
shift;; |
|
578 |
"--dernier-scrutin") |
|
ajout d'un message d'aide
|
579 |
#<numéro>|termine la génération du résultat au scrutin <numéro> |
complète re-écriture
|
580 |
last="$2" |
581 |
shift;; |
|
582 |
"--période") |
|
ajout d'un message d'aide
|
583 |
#<jj/mm/aaaa:JJ/MM/AAAA>|génère un résultat pour les scrutins allant de jj/mm/aaaa à JJ/MM/AAAA |
complète re-écriture
|
584 |
periode=$true_flag |
585 |
periode_value="$2" |
|
586 |
shift;; |
|
587 |
"--liste-députés-du-groupe") |
|
multiples modifications
|
588 |
#<groupe>|liste les député·e·s du groupe <groupe> |
complète re-écriture
|
589 |
liste_deputes=$true_flag |
modifie options (amélioratio...
|
590 |
liste_deputes_value="${2}" |
complète re-écriture
|
591 |
shift;; |
592 |
"--liste-députés") |
|
ajout d'un message d'aide
|
593 |
#|liste tou-te-s les député-e-s de la mandature |
complète re-écriture
|
594 |
liste_deputes=$true_flag;; |
595 |
"--liste-dossiers") |
|
ajout d'un message d'aide
|
596 |
#|affiche une liste numérotée des dossiers et sort |
complète re-écriture
|
597 |
liste_dossiers=$true_flag;; |
598 |
"--dossier") |
|
ajout d'un message d'aide
|
599 |
#<numéro>|génère un résultat pour le dossier numéroté <numéro> |
complète re-écriture
|
600 |
dossier=$true_flag |
601 |
dossier_value="$2" |
|
602 |
shift;; |
|
603 |
"--dossiers") |
|
ajout d'un message d'aide
|
604 |
#|sélection interactive du dossier |
complète re-écriture
|
605 |
dossier=$true_flag;; |
606 |
"--conf") |
|
ajout d'un message d'aide
|
607 |
#<fichier>|indique le chemin vers le fichier de configuration. Par défaut "{_}.conf" |
complète re-écriture
|
608 |
test -r "$2" || { |
609 |
echo "config introuvable $2" >&2 |
|
610 |
options_error=$true_flag |
|
611 |
} |
|
612 |
config_file="$2" |
|
613 |
shift;; |
|
ajout de l'envoi du résultat...
|
614 |
"--mailconf") |
615 |
#<fichier>|indique le chemin vers le fichier de configuration. Par défaut "{_}.conf" |
|
616 |
test -r "$2" || { |
|
617 |
echo "config introuvable $2" >&2 |
|
618 |
options_error=$true_flag |
|
619 |
} |
|
620 |
mailconfig_file="$2" |
|
621 |
shift;; |
|
ajout de l'option de destina...
|
622 |
"--dest") |
623 |
#<répertoire>|génère le fichier dans le répertoire spécifié. Par défaut $PWD |
|
624 |
if test -n "$2" && test -d "$2" -a -r "$2"; then |
|
625 |
destination_path="$2" |
|
626 |
shift |
|
627 |
else |
|
628 |
echo "$2 n'est pas un répertoire ou n'est pas autorisé en écriture" >&2 |
|
629 |
exit 1 |
|
630 |
fi;; |
|
complète re-écriture
|
631 |
"--database") |
ajout d'un message d'aide
|
632 |
#<fichier>|indique le chemin vers la base de données SQLite3 contenant les informations. Par défaut "{_}.db" |
le fichier base de données p...
|
633 |
if test -r "$2" && file -Lb "$2" | grep -q '^SQLite 3.x database'; then |
634 |
: |
|
635 |
else |
|
complète re-écriture
|
636 |
echo "erreur sur option database: fichier '$2' introuvable ou pas une base SQLite 3" >&2 |
637 |
options_error=$true_flag |
|
modifie options (amélioratio...
|
638 |
fi |
complète re-écriture
|
639 |
database="$2" |
640 |
shift;; |
|
641 |
"--progrès-génération") |
|
ajout d'un message d'aide
|
642 |
#<chiffre>|affiche de la progression de la génération du fichier tous les <chiffre>%. Par défaut 5 |
complète re-écriture
|
643 |
generation_progress="$2" |
644 |
shift;; |
|
645 |
"--progrès-update") |
|
ajout d'un message d'aide
|
646 |
#<chiffre>|affiche de la progression de la mise à jour de la base de données tous les <chiffre>%. Par défaut 1 |
complète re-écriture
|
647 |
update_progress="$2" |
648 |
shift;; |
|
ajout de l'envoi du résultat...
|
649 |
"--mail") |
650 |
envoi_par_mail=$true_flag |
|
651 |
destinataire="$2" |
|
652 |
no_db_update=$true_flag |
|
653 |
destination_path=/dev/shm |
|
654 |
generation_progress=1000 |
|
655 |
exec > $process_token.mail 2>&1 |
|
656 |
shift;; |
|
ajout d'un message d'aide
|
657 |
"--help") |
658 |
#|affiche cette aide et quitte |
|
659 |
echo "$0 [options]" |
|
modif numéro de mandature
|
660 |
echo "génère un classeur ODS pour comparer les scrutins publics de la 16ème mandature à l'Assemblée Nationale" |
ajout d'un message d'aide
|
661 |
echo |
662 |
sed -rn '/^ *"--.+"\)/N; s/^ *"(--.+)"\)\n#(.+)$/\1|\2/p' "$0" \ |
|
663 |
| awk -F'|' -v marge=' ' -v prog="$0" '{ |
|
664 |
printf("%s %s\n" marge "%s\n\n", $1, $2, gensub("\\. ", "\\\n" marge, "g", gensub("\\{_\\}", prog, "g", $3))) |
|
665 |
}' |
|
666 |
exit;; |
|
complète re-écriture
|
667 |
esac |
668 |
shift |
|
ajout script d'analyse des v...
|
669 |
done |
écriture directe en feuille ...
|
670 | |
complète re-écriture
|
671 |
test "$options_error" = $true_flag && exit 1 |
ajout script d'analyse des v...
|
672 | |
fix configuration non sourcé...
|
673 |
if test -n "$config_file"; then |
674 |
source "$config_file" |
|
675 |
else |
|
676 |
config_file="${0}.conf" |
|
677 |
if test -r "$config_file"; then |
|
678 |
source "$config_file" |
|
679 |
fi |
|
680 |
fi |
|
681 | ||
ne bloque pas inutilement (a...
|
682 |
while true; do |
683 |
if ls -1rt /dev/shm/*."${0##*/}" | head -1 | grep -q "^$token_file$"; then |
|
684 |
# c'est notre tour |
|
685 |
break |
|
686 |
else |
|
687 |
sleep 5 |
|
688 |
fi |
|
689 |
done |
|
690 | ||
n'autorise qu'une seule exéc...
|
691 |
in_ram_database=$process_token.db |
complète re-écriture
|
692 |
if test -r "$database"; then |
693 |
cp "$database" "$in_ram_database" |
|
694 |
else |
|
695 |
create_database |
|
696 |
fi |
|
ajout script d'analyse des v...
|
697 | |
complète re-écriture
|
698 |
if test "$periode" = $true_flag; then |
corrige période d'extraction...
|
699 |
function get_date () { |
700 |
sqlite_request "select distinct(date) from scrutins order by num asc" | awk -v d="$1" -v comp=$2 ' |
|
701 |
function norm_date (date) { |
|
702 |
split(date, a, "/") |
|
703 |
return sprintf("%s%s%s", |
|
704 |
length(a[3]) == 4 ? a[3] : length(a[3]) == 2 ? "20" a[3] : strftime("%Y", systime()), |
|
705 |
length(a[2]) == 2 ? a[2] : "0" a[2], |
|
706 |
length(a[1]) == 2 ? a[1] : "0" a[1]) |
|
707 |
} |
|
708 |
function output (date) { |
|
709 |
print date |
|
710 |
found = 1 |
|
711 |
exit |
|
712 |
} |
|
713 |
BEGIN { d = norm_date(d) } |
|
714 |
{ |
|
715 |
s = norm_date($1) |
|
716 |
if (NR == 1 && s > d && comp == "first") output($1) |
|
717 |
if (s >= d && comp == "first") output($1) |
|
718 |
if (s == d && comp == "last") output($1) |
|
719 |
if (s > d && comp == "last") output(previous) |
|
720 |
previous = $1 |
|
721 |
} |
|
722 |
END { |
|
723 |
if (!found) print previous |
|
724 |
}' |
|
725 |
} |
|
726 |
first=$(sqlite_request "select min(num) from scrutins where date = '$(get_date ${periode_value%:*} first)'") |
|
727 |
last=$(sqlite_request "select max(num) from scrutins where date = '$(get_date ${periode_value#*:} last)'") |
|
ajout de l'envoi du résultat...
|
728 |
if test "$envoi_par_mail" = $true_flag; then |
729 |
texte_periode="du $(get_date ${periode_value%:*} first) (scrutin n°$first) au $(get_date ${periode_value#*:} last) (scrutin n°$last)" |
|
730 |
fi |
|
fixe dernier scrutin lorsque...
|
731 |
elif test "$dossier" != $true_flag -a "$no_db_update" = $true_flag; then |
732 |
test -z "$last" && last=$(sqlite_request "select max(num) from scrutins") |
|
fix bug sur premier scrutin
|
733 |
test -z "$first" && first=1 |
complète re-écriture
|
734 |
fi |
affiche nom du fichier des r...
|
735 | |
complète re-écriture
|
736 |
if test "$liste_dossiers" = $true_flag; then |
ajout de l'envoi du résultat...
|
737 |
if test "$envoi_par_mail" = $true_flag; then |
738 |
echo "Voici la liste des dossiers actuellement à l'étude" |
|
739 |
fi |
|
améliore la sortie des dossi...
|
740 |
sqlite_request "select printf('• %s (%s)', titre, url) from dossiers" |
complète re-écriture
|
741 |
exit |
742 |
fi |
|
743 | ||
744 |
if test "$db_update_only" = $true_flag; then |
|
745 |
unset first last |
|
factorisation
|
746 |
last=$(dernier_scrutin_public) |
complète re-écriture
|
747 |
update_database |
748 |
exit |
|
749 |
fi |
|
750 | ||
751 |
if test "$liste_deputes" = $true_flag; then |
|
752 |
if test -n "$liste_deputes_value"; then |
|
ajout de l'envoi du résultat...
|
753 |
if test "$envoi_par_mail" = $true_flag; then |
754 |
echo "Voici la liste des député·e·s du groupe dont le nom correspond au critère $liste_deputes_value" |
|
755 |
fi |
|
améliore sélection (à contin...
|
756 |
sqlite_request "select printf('%s - %s%s', |
757 |
députés.nom, |
|
758 |
groupes.nom, |
|
759 |
iif(groupes.nom_court is not null, ' [' || groupes.nom_court || ']', '')) |
|
760 |
from députés |
|
761 |
inner join groupes on groupes.id = députés.groupe |
|
762 |
where |
|
763 |
groupes.nom like '%$liste_deputes_value%' |
|
764 |
or |
|
765 |
groupes.nom_court = '$liste_deputes_value'" |
|
complète re-écriture
|
766 |
else |
ajout de l'envoi du résultat...
|
767 |
if test "$envoi_par_mail" = $true_flag; then |
768 |
echo "Voici la liste des député·e·s" |
|
769 |
fi |
|
améliore sélection (à contin...
|
770 |
sqlite_request "select printf('%s - %s%s', |
771 |
députés.nom, |
|
772 |
groupes.nom, |
|
773 |
iif(groupes.nom_court is not null, ' [' || groupes.nom_court || ']', '')) |
|
774 |
from députés |
|
775 |
inner join groupes on groupes.id = députés.groupe |
|
776 |
order by groupes.nom asc" |
|
complète re-écriture
|
777 |
fi |
778 |
exit |
|
779 |
fi |
|
écriture directe en feuille ...
|
780 | |
multiples modifications
|
781 |
for (( g = 0; g < ${#_groupe[@]}; g++ )); do |
782 |
# on vérifie si c'est un ou une député |
|
783 |
depute_count=$(sqlite_request "select count(distinct nom) from députés where nom like '%${_groupe[$g]}%'") |
|
784 |
groupe_count=$(sqlite_request "select count(distinct nom) from groupes where nom like \"%${_groupe[$g]}%\" or nom_court is '${_groupe[$g]}'") |
|
785 |
if test $depute_count -eq 1 -a $groupe_count -ne 1; then |
|
786 |
groupe[$g]=$(sqlite_request "select distinct nom from députés where nom like '%${_groupe[$g]}%'") |
|
fix nom avec apostrophe
|
787 |
id_groupe[$g]=députés:$(sqlite_request "select group_concat(id) from députés where nom is '${groupe[$g]//\'/\'\'}'") |
multiples modifications
|
788 |
elif test $groupe_count -eq 1 -a $depute_count -ne 1; then |
789 |
groupe[$g]=$(sqlite_request "select distinct nom from groupes where nom like \"%${_groupe[$g]}%\" or nom_court is '${_groupe[$g]}'") |
|
fix nom avec apostrophe
|
790 |
id_groupe[$g]=groupes:$(sqlite_request "select id from groupes where nom is '${groupe[$g]//\'/\'\'}'") |
multiples modifications
|
791 |
elif test $groupe_count -eq 1 -a $depute_count -eq 1; then |
améliore l'affichage des err...
|
792 |
echo "dénomination ambigüe pour « ${_groupe[$g]} »" |
793 |
sqlite_request "select printf('député·e: %s', distinct nom) from députés where nom like '%${_groupe[$g]}%'" | grep --color=always -i "${_groupe[$g]}" |
|
794 |
sqlite_request "select printf('groupe : %s', distinct nom) from groupes where nom like \"%${_groupe[$g]}%\" or nom_court is '${_groupe[$g]}'" | grep --color=always -i "${_groupe[$g]}" |
|
795 |
echo |
|
multiples modifications
|
796 |
elif test $depute_count -gt 1; then |
améliore l'affichage des err...
|
797 |
echo "plusieurs député·e·s trouvé·e·s correspondant à « ${_groupe[$g]} »" |
798 |
sqlite_request "select distinct nom from députés where nom like '%${_groupe[$g]}%'" | grep --color=always -i "${_groupe[$g]}" |
|
799 |
echo |
|
multiples modifications
|
800 |
elif test $groupe_count -gt 1; then |
améliore l'affichage des err...
|
801 |
echo "plusieurs groupes trouvés correspondant à « ${_groupe[$g]} »" |
802 |
sqlite_request "select distinct nom from groupes where nom like \"%${_groupe[$g]}%\" or nom_court is '${_groupe[$g]}'" | grep --color=always -i "${_groupe[$g]}" |
|
803 |
echo |
|
multiples modifications
|
804 |
else |
améliore l'affichage des err...
|
805 |
echo "aucun·e député·e ou groupe ne correspond au critère « ${_groupe[$g]} »" |
806 |
echo |
|
complète re-écriture
|
807 |
fi |
multiples modifications
|
808 |
done |
complète re-écriture
|
809 | |
ajout de l'envoi du résultat...
|
810 |
if test -s $process_token.mail; then |
811 |
exit 1 |
|
812 |
fi |
|
813 | ||
complète re-écriture
|
814 |
update_database |
815 |
write_comparaison |
|
ajout de l'envoi du résultat...
|
816 | |
817 |
if test "$envoi_par_mail" = $true_flag; then |
|
818 |
echo Vous pourrez trouver en pièce-jointe les résultats demandés avec ces critères: |
|
819 |
if test ${#groupe[@]} -gt 0; then |
|
820 |
echo "votes des groupes et député·e·s suivant·e·s:" |
|
821 |
printf " • %s\n" "${groupe[@]}" |
|
822 |
fi |
|
823 |
if test "$periode" = $true_flag; then |
|
824 |
echo sur la période allant $texte_periode |
|
825 |
fi |
|
826 |
fi |