J’ai donc modifié le programme enfin d’avoir les mêmes dates que le tableaux faux sur facebook :

Voici donc mon programme :

MyDate=("201701" "201702" "201703" "201704" "201705" "201706" "201707" "201708" "201709" "201710" "201711" "201712" "201801" "201802" "201803" "201804" "201805" "201806" "201807" "201808" "201809" "201810" "201811" "201812" "201901" "201902" "201903" "201904" "201905" "201906" "201907" "201908" "201909" "201910" "201911" "201912" "202001" "202002" "202003" "202004" "202005" "202006" "202007" "202008" "202009")

for TheDate in ${MyDate[@]}; do
  declare sum_$TheDate=0
done
for entry in *.csv
do
  echo "$entry"
  for TheDate in ${MyDate[@]}; do
	touch temp.dat
  	cat $entry | grep -v "sexe" | sed 's/""/"-"/g'| awk -F'\";\"'  '{print substr($7,1, 6)}' | sort -n | uniq -c | grep $TheDate | awk '{print $1}' > temp.dat
  	declare current_$TheDate=$(cat temp.dat)
	varname=current_$TheDate
	varname2=sum_$TheDate
	if [ ${!varname} > 0 ]
  	then
		echo "In file $entry (dead $TheDate) : ${!varname}"
          	let "${varname2}=${!varname2}+${!varname}"
  	fi
   done
done
for TheDate in ${MyDate[@]}; do
	varname=sum_$TheDate
	echo "Sum dead $TheDate : ${!varname} "
done

Voici donc les données Brutes et le temps pour l’exécution du script :

$ time ./find.bash

...

real	41m20,200s
user	66m12,488s
sys	4m47,886s

Mon tableau :

Voici donc les différences avec le tableau sur Facebook :

Bref, Facebook une source intense de désinformation et de tracing marketing. Misère. En plus de cela sur septembre 2019 je ne dois avoir que 80% des données, il doit donc « manquer » presque 8000 noms. L’explication est la suivante :

Il faut bien comprendre que si je prends le mois de Janvier, sur Janvier on avait 81% des données dans le fichier de Janvier. Et au fils du temps les données ont été consolidées de la façon suivante:

Mise à jours fait 29/10/2020 : Lire l’article : https://www.liberation.fr/checknews/2020/10/29/les-donnees-de-l-insee-montrent-elles-vraiment-qu-il-n-y-a-pas-eu-de-surmortalite-liee-au-covid_1803730 : Les données de l’Insee montrent-elles vraiment qu’il n’y a pas eu de surmortalité liée au Covid ?

J’ai pu voir un faux tableaux sur Facebook :

Pourquoi il est faux ? Si je fais un script pour chercher le nombre de mort sur les mois de Janvier :

sum_201701=0
sum_201801=0
sum_201901=0
sum_202001=0
for entry in *.csv
do
  echo "$entry"
  cat $entry | grep -v "sexe" | sed 's/""/"-"/g'| awk -F'\";\"'  '{print substr($7,1, 6)}' | sort -n | uniq -c | grep "201701" | awk '{print $1}' > temp_201701.dat
  current_201701=$(cat temp_201701.dat)
  cat $entry | grep -v "sexe" | sed 's/""/"-"/g'| awk -F'\";\"'  '{print substr($7,1, 6)}' | sort -n | uniq -c | grep "201801" | awk '{print $1}' > temp_201801.dat
  current_201801=$(cat temp_201801.dat)
  cat $entry | grep -v "sexe" | sed 's/""/"-"/g'| awk -F'\";\"'  '{print substr($7,1, 6)}' | sort -n | uniq -c | grep "201901" | awk '{print $1}' > temp_201901.dat
  current_201901=$(cat temp_201901.dat)
  cat $entry | grep -v "sexe" | sed 's/""/"-"/g'| awk -F'\";\"'  '{print substr($7,1, 6)}' | sort -n | uniq -c | grep "202001" | awk '{print $1}' > temp_202001.dat
  current_202001=$(cat temp_202001.dat)
  if [ $current_201701 > 0 ]
  then
          echo "In file $entry (dead 201701) : $current_201701"
          let "sum_201701=sum_201701+current_201701"
  fi
  if [ $current_201801 > 0 ]
  then
          echo "In file $entry (dead 201801) : $current_201801"
          let "sum_201801=sum_201801+current_201801"
  fi
  if [ $current_201901 > 0 ]
  then
          echo "In file $entry (dead 201901) : $current_201901" 
          let "sum_201901=sum_201901+current_201901"
  fi
  if [ $current_202001 > 0 ]
  then
          echo "In file $entry (dead 202001) : $current_202001"
          let "sum_202001=sum_202001+current_202001"
  fi
done
echo "Sum dead 201701 : $sum_201701 "
echo "Sum dead 201801 : $sum_201801 "
echo "Sum dead 201901 : $sum_201901 "
echo "Sum dead 202001 : $sum_202001 "

Et si je fais un script pour faire pareil sur le mois de mars :

sum_201703=0
sum_201803=0
sum_201903=0
sum_202003=0
for entry in *.csv
do
  echo "$entry"
  cat $entry | grep -v "sexe" | sed 's/""/"-"/g'| awk -F'\";\"'  '{print substr($7,1, 6)}' | sort -n | uniq -c | grep "201703" | awk '{print $1}' > temp_201703.dat
  current_201703=$(cat temp_201703.dat)
  cat $entry | grep -v "sexe" | sed 's/""/"-"/g'| awk -F'\";\"'  '{print substr($7,1, 6)}' | sort -n | uniq -c | grep "201803" | awk '{print $1}' > temp_201803.dat
  current_201803=$(cat temp_201803.dat)
  cat $entry | grep -v "sexe" | sed 's/""/"-"/g'| awk -F'\";\"'  '{print substr($7,1, 6)}' | sort -n | uniq -c | grep "201903" | awk '{print $1}' > temp_201903.dat
  current_201903=$(cat temp_201903.dat)
  cat $entry | grep -v "sexe" | sed 's/""/"-"/g'| awk -F'\";\"'  '{print substr($7,1, 6)}' | sort -n | uniq -c | grep "202003" | awk '{print $1}' > temp_202003.dat
  current_202003=$(cat temp_202003.dat)
  if [ $current_201703 > 0 ]
  then
          echo "In file $entry (dead 201703) : $current_201703"
          let "sum_201703=sum_201703+current_201703"
  fi
  if [ $current_201803 > 0 ]
  then
          echo "In file $entry (dead 201803) : $current_201803"
          let "sum_201803=sum_201803+current_201803"
  fi
  if [ $current_201903 > 0 ]
  then
          echo "In file $entry (dead 201903) : $current_201903" 
          let "sum_201903=sum_201903+current_201903"
  fi
  if [ $current_202003 > 0 ]
  then
          echo "In file $entry (dead 202003) : $current_202003"
          let "sum_202003=sum_202003+current_202003"
  fi
done
echo "Sum dead 201703 : $sum_201703 "
echo "Sum dead 201803 : $sum_201803 "
echo "Sum dead 201903 : $sum_201903 "
echo "Sum dead 202003 : $sum_202003 "

Le résultats pour Janvier :

deces-2017.csv
In file deces-2017.csv (dead 201701) : 68819
deces-2018.csv
In file deces-2018.csv (dead 201701) : 116
In file deces-2018.csv (dead 201801) : 60527
deces-2019.csv
In file deces-2019.csv (dead 201701) : 24
In file deces-2019.csv (dead 201801) : 81
In file deces-2019.csv (dead 201901) : 61147
deces-2020-m01.csv
In file deces-2020-m01.csv (dead 201701) : 6
In file deces-2020-m01.csv (dead 201801) : 4
In file deces-2020-m01.csv (dead 201901) : 20
In file deces-2020-m01.csv (dead 202001) : 47344
Deces_2020_M02.csv
In file Deces_2020_M02.csv (dead 201701) : 2
In file Deces_2020_M02.csv (dead 201801) : 6
In file Deces_2020_M02.csv (dead 201901) : 11
In file Deces_2020_M02.csv (dead 202001) : 9895
Deces_2020_M03.csv
In file Deces_2020_M03.csv (dead 201901) : 6
In file Deces_2020_M03.csv (dead 202001) : 336
Deces_2020_M04.csv
In file Deces_2020_M04.csv (dead 201901) : 4
In file Deces_2020_M04.csv (dead 202001) : 130
Deces_2020_M05.csv
In file Deces_2020_M05.csv (dead 201901) : 1
In file Deces_2020_M05.csv (dead 202001) : 68
Deces_2020_M06.csv
In file Deces_2020_M06.csv (dead 201801) : 1
In file Deces_2020_M06.csv (dead 201901) : 4
In file Deces_2020_M06.csv (dead 202001) : 63
Deces_2020_M07.csv
In file Deces_2020_M07.csv (dead 201701) : 1
In file Deces_2020_M07.csv (dead 201801) : 1
In file Deces_2020_M07.csv (dead 201901) : 3
In file Deces_2020_M07.csv (dead 202001) : 56
Deces_2020_M08.csv
In file Deces_2020_M08.csv (dead 201701) : 1
In file Deces_2020_M08.csv (dead 201901) : 1
In file Deces_2020_M08.csv (dead 202001) : 23
Deces_2020_M09.csv
In file Deces_2020_M09.csv (dead 201801) : 3
In file Deces_2020_M09.csv (dead 201901) : 3
In file Deces_2020_M09.csv (dead 202001) : 37
Sum dead 201701 : 68969 
Sum dead 201801 : 60623 
Sum dead 201901 : 61200 
Sum dead 202001 : 57952 

Le résultats pour Mars :

...
deces-2017.csv
In file deces-2017.csv (dead 201703) : 50817
deces-2018.csv
In file deces-2018.csv (dead 201703) : 116
In file deces-2018.csv (dead 201803) : 61072
deces-2019.csv
In file deces-2019.csv (dead 201703) : 17
In file deces-2019.csv (dead 201803) : 102
In file deces-2019.csv (dead 201903) : 54331
deces-2020-m01.csv
In file deces-2020-m01.csv (dead 201703) : 6
In file deces-2020-m01.csv (dead 201803) : 6
In file deces-2020-m01.csv (dead 201903) : 13
Deces_2020_M02.csv
In file Deces_2020_M02.csv (dead 201703) : 1
In file Deces_2020_M02.csv (dead 201803) : 5
In file Deces_2020_M02.csv (dead 201903) : 11
Deces_2020_M03.csv
In file Deces_2020_M03.csv (dead 201703) : 2
In file Deces_2020_M03.csv (dead 201803) : 4
In file Deces_2020_M03.csv (dead 201903) : 5
In file Deces_2020_M03.csv (dead 202003) : 48160
Deces_2020_M04.csv
In file Deces_2020_M04.csv (dead 201803) : 1
In file Deces_2020_M04.csv (dead 201903) : 8
In file Deces_2020_M04.csv (dead 202003) : 14001
Deces_2020_M05.csv
In file Deces_2020_M05.csv (dead 201903) : 3
In file Deces_2020_M05.csv (dead 202003) : 969
Deces_2020_M06.csv
In file Deces_2020_M06.csv (dead 201803) : 3
In file Deces_2020_M06.csv (dead 201903) : 2
In file Deces_2020_M06.csv (dead 202003) : 223
Deces_2020_M07.csv
In file Deces_2020_M07.csv (dead 201703) : 1
In file Deces_2020_M07.csv (dead 201803) : 5
In file Deces_2020_M07.csv (dead 201903) : 8
In file Deces_2020_M07.csv (dead 202003) : 126
Deces_2020_M08.csv
In file Deces_2020_M08.csv (dead 201703) : 1
In file Deces_2020_M08.csv (dead 201803) : 2
In file Deces_2020_M08.csv (dead 201903) : 4
In file Deces_2020_M08.csv (dead 202003) : 77
Deces_2020_M09.csv
In file Deces_2020_M09.csv (dead 201803) : 3
In file Deces_2020_M09.csv (dead 201903) : 3
In file Deces_2020_M09.csv (dead 202003) : 71
Sum dead 201703 : 50961 
Sum dead 201803 : 61203 
Sum dead 201903 : 54388 
Sum dead 202003 : 63627 

Ensuite si je cherche a controler mes sources via un article : https://www.liberation.fr/checknews/2020/05/11/est-il-vrai-qu-il-n-y-a-pas-plus-de-morts-en-france-au-premier-trimestre-2020-que-les-cinq-dernieres_1787936 (il est ecrit le 11/05/2020) donc il n’a pas les fichiers de Deces_2020_M05.csv à Deces_2020_M09.csv :

Il y a eu 62 570 décès en mars 2020, soit davantage que pour le même mois en 2019 (53 631 décès), 2018 (60 407), 2017 (50 251), 2016 (54 155), et 2015 (54 948).

Les valeurs sont proches et mes valeurs sont supérieures donc je dirais que c’est bon. J’attends le controle de Luc 🙂

Ensuite si je fais pareil sur le mois de Janvier : https://factuel.afp.com/covid-19-ce-visuel-montrant-le-nombre-de-deces-en-france-de-janvier-avril-est-errone – tableau fait en mai 2020 donc il manque aussi des fichiers .

Les valeurs sont proches et mes valeurs sont supérieures donc je dirais que c’est bon. J’attends le contrôle de Luc 🙂

A suivre.

 Chargement ...