Overview

Abstract (English)

In 2010, the federal government amended its Programme for Census Statistics Canada by abandoning the mandatory long questionnaire, and its replacement by a new voluntary survey, the National Household Survey (NHS). Under the previous census, the mandatory long questionnaire allowed minimize bias nonresponse maintaining superior response rate to 95%, through being associated with possible differences in the profiles of respondents and non-respondents . In Quebec, the optional nature of participation in the survey resulted in a 71.9% response rate (Institut de la statistique du Québec, 2014, p. 42), increasing the risk of bias due to nonresponse. Weighting by Statistics Canada is used to reduce its scope, but not to eliminate it, especially for small regions or territories. Especially for data on income, the optional nature of the NHS, combined with the highest rate of non-response to these questions, raised even more doubts about the quality of such data. To inform users, a comparison of data on the NHS income is realized with those from an administrative file, namely tax revenues held by the Quebec Revenue Agency (RQ). The report is divided into four parts. The two data sources are described in the first part. In the second part is presented the methodology and comparative universe. The results follow in the third part. Key findings In 2010, the federal government amend the Statistics Canada Census Programme replacing the mandatory long form with a new voluntary survey, the National Household Survey (NHS) .This change has raised many questions. Notably, several users questioned the quality of data on the income variable, due to the high non-response combined with the optional nature of the NHS. To inform users of the data in Quebec, methodological report offers a comparison of the estimated income of the ENM and administrative data from a file, or that of tax revenues held by the Revenue Agency Quebec (RQ). Comparisons are performed and various geographical scales: administrative regions, regional county municipalities and municipalities. The differences by age, sex, according to various indicators and income concepts are also reviewed.

Abstract (French)

En 2010, le gouvernement fédéral modifie son Programme du Recensement pour de Statistique Canada par l’abandon du caractère obligatoire du questionnaire long, et son remplacement par une nouvelle enquête à participation volontaire, l’Enquête nationale auprès des ménages (ENM). Dans le cadre des recensements précédents, le caractère obligatoire du questionnaire long permettait de minimiser le biais de non-réponse en maintenant des taux de réponse supérieurs à 95%, le biais étant associé aux différences possibles entre les profils des répondants et des non-répondants. Au Québec, le caractère facultatif de la participation à l’enquête s’est traduit par un taux de réponse de 71,9% (Institut de la statistique du Québec, 2014, p. 42 ), augmentant ainsi le risque de biais dû à la non-réponse. La pondération effectuée par Statistique Canada permet d’en réduire la portée, mais pas de l’éliminer, surtout pour des sousunivers ou des petits territoires. Particulièrement pour la donnée sur le revenu, le caractère facultatif de l’ENM, combiné au taux plus élevé de nonréponse pour ces questions, a suscité encore plus de doutes sur la qualité de ces données3 . Afin d’éclairer les utilisateurs, une comparaison des données sur le revenu de l’ENM est réalisée avec celles provenant d’un fichier administratif, soit celui des revenus fiscaux détenus par l’Agence de revenu du Québec (RQ). Le rapport se divise en quatre parties. Les deux sources de données sont décrites dans la première partie. Dans la seconde partie est présentée la méthodologie ainsi que les univers comparés. Les résultats suivent en troisième partie. Les principaux constats En 2010, le gouvernement fédéral modifie le Programme du Recensement de Statistique Canada en remplaçant le questionnaire détaillé et obligatoire par une nouvelle enquête à participation volontaire, l’Enquête nationale auprès des ménages (ENM).Ce changement a suscité de nombreuses interrogations. Notamment, plusieurs utilisateurs doutent de la qualité des données sur la variable du revenu, en raison du taux élevé de non-réponse combiné au caractère facultatif de l’ENM. Afin d’éclairer les utilisateurs de ces données au Québec, ce rapport méthodologique propose une comparaison entre les estimations sur le revenu de l’ENM et des données provenant d’un fichier administratif, soit celui des revenus fiscaux détenus par l’Agence du revenu du Québec (RQ). Des comparaisons sont ainsi effectuées à diverses échelles géographiques : régions administratives, municipalités régionales de comté, et municipalités. Les différences selon l’âge, le sexe, selon divers indicateurs et concepts de revenu sont aussi examinées.