Translate

ラベル 新型コロナウイルス の投稿を表示しています。 すべての投稿を表示
ラベル 新型コロナウイルス の投稿を表示しています。 すべての投稿を表示

2020年7月1日水曜日

◆【新型コロナ】ECDCのデータから国別の実効再生産数を計算するRのコード例です

ECDCが公開している新型コロナウイルスの感染確認者数のデータを使って、各国の実効再生産数を計算するコードの例です。

日付のデータを付加するために、コードが長くなっていますが、日付データを付加しなければもっとシンプルにすることができます。

古いノートパソコンを使っていますが、約200カ国の実効再生産数を十数秒程度で計算することができます。

計算で得られたデータは、ダッシュボードで利用しています。

なお、実効再生産数の計算には、「Improved inference of time-varying reproduction numbers during infectious disease outbreaks」という論文で紹介されているRのパッケージ「EpiEstim」を利用しています。

なお、発症間隔のパラメータは、平均を4.8、標準偏差を2.3に設定しています。


【Rコードの例】
library(EpiEstim)

df_ECDC <- read.csv("https://opendata.ecdc.europa.eu/covid19/casedistribution/csv", na.strings = "", fileEncoding = "UTF-8-BOM",stringsAsFactors = FALSE)

geo_list <- unique(df_ECDC$countriesAndTerritories)
df_ECDCtemp <- df_ECDC
df_ECDCtemp1 <- NULL
df_ECDCtemp2 <- NULL
  temp_R <- NULL
  temp_Rt <- NULL
  temp_Date <- NULL
  temp_Case <- NULL
  temp_DC <- NULL
  df_DC <- NULL
  df_Rt <- NULL
  temp_notcal <- NULL
  df_notcal <- NULL


###繰り返しの処理で、多くの国の計算を行います。

for (i in seq_along(geo_list))
 {
 df_ECDCtemp1 <- subset(df_ECDCtemp,df_ECDCtemp$countriesAndTerritories==geo_list[i])
 df_ECDCtemp2 <- subset(df_ECDCtemp1,df_ECDCtemp1$cases >= 0)
 if (length(df_ECDCtemp2$cases) >= 70)
 {rt_parametric_si <- estimate_R(df_ECDCtemp2$cases,method = "parametric_si",config = make_config(list(mean_si = 4.8,
        std_si = 2.3)))
  temp_R <- round(rt_parametric_si$R,2)
  temp_Rt <- mutate(temp_R,countriesAndTerritories=geo_list[i])
  Numa <- nrow(rt_parametric_si$R)
  temp_date <- as.data.frame(df_ECDCtemp1$Date)
  Numb <- nrow(temp_date)
  Numc <- Numb-Numa
  temp_date <- temp_date[-c(1:Numc),]
  temp_Rt <- mutate(temp_Rt,Days=seq(from=1,to=nrow(rt_parametric_si$R), by=1))
  temp_Rt <- mutate(temp_Rt,Date=temp_date)
  temp_Date1 <- matrix(rt_parametric_si$dates,ncol=1)
  colnames(temp_Date1) <- "Days"
  temp_Case <- matrix(rt_parametric_si$I,ncol=1)
  colnames(temp_Case) <- "Cases"
  temp_DC <- cbind(temp_Date1,temp_Case)
  temp_DC <- as.data.frame(temp_DC)
  temp_DC <- mutate(temp_DC,countriesAndTerritories=geo_list[i])
  df_DC <- rbind(df_DC,temp_DC)
  df_Rt <- rbind(df_Rt,temp_Rt)}
  else {temp_notcal <- as.data.frame(geo_list[i])
  temp_notcal <- mutate(temp_notcal,Under70days=nrow(df_ECDCtemp1))
  colnames(temp_notcal) <- c("countriesAndTerritories","Under70days")
  df_notcal <- rbind(df_notcal,temp_notcal)
 }
}

###グラフで「1」の線を引くためのデータを追加します
Const <- c(rep(1,nrow(df_Rt)))
Const <- as.data.frame(Const)
colnames(Const) <- c("C")

df_Rt <- cbind(Const,df_Rt)

write.csv(df_Rt,"Rt.csv",fileEncoding = "UTF8")

          ------------------------------------------------------------------------------

 
------------------------------------------------------------------------------
-------------------------------------------------------------------

--------------------------------------------------------------------

2020年4月16日木曜日

◆【新型コロナ】感染確認者数、死亡者数について、ECDCのデータを利用したダッシュボードです

COVID-19 Novel Coronavirus Transition Graphs DashBoard Doubling Time Chart ECDCのデータを利用したダッシュボードです。
※20201216 ECDCが12月14日のデータを最後に毎日のデータ更新を終了しました。今後は週報になるそうです。このダッシュボードも更新を終了しました。
----------------------------------------------------------------------------------------

---------------------------------------------------
-
データポータルのダッシュボードです。 

すでに、ジョンズ・ホプキンス大学のデータを利用したダッシュボードを作成していますが、データのエラーが生じることがあるので、複数のデータソースがあった方がいいと思い、「プランB」として作成しました。国別のグラフなどが利用できます。

New:実効再生産数(Rt)の推定値のページを追加しています。70日分以上の感染確認者数のデータがある国について計算しています。プルダウンメニューで国ごとに表示できます。

 

【不具合など】
20200429 4月28日のスペインのデータが欠損しているようです。明日の更新を待ってみます。南ヨーロッパの感染確認者数が前日から20万人減少していたので気づきました。
20200430 4月29日のスペインのデータが欠損しています。スペインの28日のデータはあります。サイトの概要速報ページの上では、スペインの29日のデータは、28日と同じになっています。ECDCのデータに何かエラーが生じているようです。応急処置として、29日のスペインの新規数のデータを「0」とした1行を追加しました。
20200501 4月30日のスペインのデータが欠損しているので、スペインの0のデータを追加しています。遡って確認すると、4月26日付のデータからスペインの最新日付のデータが欠損しています。スペインについて、データの収集方法が変更になったということなのかもしれません。→ECDCに問い合わせたところ、返信がありました。「スペインでの報告の不一致と遅れは、専門家によっても指摘されており、現在、症例数の正確な報告を確実にする過程にあります。」ということで、今後変わる可能性もあるかもしれません。ECDCのデータは、日々の新規の数のデータなので、スペインのデータの収集が1日遅れの場合、「0」とはせずに、最新の日付については欠損にしているのではないかと思われます。
20200502 5月1日のデータには、スペインの同日付データも含まれていました。問題が解決したようです。ただし、4月30日のスペインのデータが欠損していたので、その欠損値に対して、感染確認者数、死亡者数とも0のデータを代入しています。
その後も、最新の日付のデータが欠損していたり、数日前のデータが欠損したり、一日分のデータが欠損している状態が続いています。
20200513 csv形式のデータが更新されず、更新されていたExcel形式データをダウンロードして処理しましたが、csv用の処理のままでは不具合がありました。今は解消されていると思います。なお、スペインのデータは今も最新の日付のデータが欠損しています。
20200525 イギリスの、最新の日付のデータが欠損しています。
20201216 ECDCが毎日のデータ更新を終了しました。今後は週報になるそうです。


◆【新型コロナ】ECDCのデータから国別の実効再生産数を計算するRのコード例です

↓ジョンズ・ホプキンス大学のデータを利用したダッシュボードはこちらです。



​​​​--------------------------------------------------------------------------​

【当ブログのリンクはご自由にどうぞ。もし、楽天市場で何か買い物をされる場合は、下記のバナーなどをクリックしてから、買い物をしていただけると、試作ダッシュボードの運営を支援していただくことになります。当ブログはアクセス数が多くないので、AdSenseなどの対象外です。楽天アフィリエイトだけが運営の足しになっています。】




------------------------------------------------------------------


-------------------------------------------------------------------------------


【更新しました】新型コロナウイルス感染者総数の推移グラフ:Day level information on 2019-nCoV affected cases:死亡者数の増加ペースがSARSの場合よりかなり速いのが気がかりです - One of my favorite things is ...:楽天ブログ



----------------------------------------------------------------------------------------

---------------------------------------------------
-


  ----------------------------------------------------------------------------------------

◆日本のインフルエンザ:「定点当たり報告数」データのまとめのダッシュボード : Influenza in Japan DashBoard:「都道府県別」のページを追加しました

2020年3月30日月曜日

◆【COVID-19】グーグルのデータポータルで「州の名前」がある列から「州のコード」(ISOコード)のフィールドを作成して、コロプレス地図を作成しました

グーグルのデータポータルを使って、新型コロナウイルスの感染者数の推移グラフなどのダッシュボードを作成しています。

「JHU CSSE」の「Covid19 Daily Reports」の新型コロナウイルスのデータの「Province.State」の列には、クルーズ船名など、州の名前以外のものが含まれているので、グーグルのダッシュボード「データポータル」でコロプレス地図を作成する際に、うまくいかない場合がありました。

そこで、データポータルで、州の名前のある列から、州のコード(ISOコード)のフィールドを新たに作成して、コロプレス地図を作成すると、正確なものができました。

データポータルのコロプレス地図の「地域ディメンション」のところで、「フィールド作成」を選択し、下記のスクリプトで「州コード」のフィールドを作成します。

なお、作成した「州コード」フィールドの属性は、「テキスト」ではなく「地域」にします。そうすることによって、「ズームエリア」の機能が利用できるようになるようです。

また、フィルタで、「Country」を「US」に絞り込みます。

データポータルの地図のページでは、「Province.State」のプルダウンメニューも設けていて、地図上での州の選択だけでなく、プルダウンメニューからも州を選択できるようにしています。

州を選択すると、州別の日ごとの推移グラフを作成できます。

↓データポータルで、「Province.State」の列にある州の名前から「州コード」のフィールドを作成するスクリプト。
-----------------------------------------------
CASE
when Province.State = "Alabama" then "US-AL"
when Province.State = "Alaska" then "US-AK"
when Province.State = "Arizona" then "US-AZ"
when Province.State = "Arkansas" then "US-AR"
when Province.State = "California" then "US-CA"
when Province.State = "Colorado" then "US-CO"
when Province.State = "Connecticut" then "US-CT"
when Province.State = "Delaware" then "US-DE"
when Province.State = "Florida" then "US-FL"
when Province.State = "Georgia" then "US-GA"
when Province.State = "Hawaii" then "US-HI"
when Province.State = "Idaho" then "US-ID"
when Province.State = "Illinois" then "US-IL"
when Province.State = "Indiana" then "US-IN"
when Province.State = "Iowa" then "US-IA"
when Province.State = "Kansas" then "US-KS"
when Province.State = "Kentucky" then "US-KY"
when Province.State = "Louisiana" then "US-LA"
when Province.State = "Maine" then "US-ME"
when Province.State = "Maryland" then "US-MD"
when Province.State = "Massachusetts" then "US-MA"
when Province.State = "Michigan" then "US-MI"
when Province.State = "Minnesota" then "US-MN"
when Province.State = "Mississippi" then "US-MS"
when Province.State = "Missouri" then "US-MO"
when Province.State = "Montana" then "US-MT"
when Province.State = "Nebraska" then "US-NE"
when Province.State = "Nevada" then "US-NV"
when Province.State = "New Hampshire" then "US-NH"
when Province.State = "New Jersey" then "US-NJ"
when Province.State = "New Mexico" then "US-NM"
when Province.State = "New York" then "US-NY"
when Province.State = "North Carolina" then "US-NC"
when Province.State = "North Dakota" then "US-ND"
when Province.State = "Ohio" then "US-OH"
when Province.State = "Oklahoma" then "US-OK"
when Province.State = "Oregon" then "US-OR"
when Province.State = "Pennsylvania" then "US-PA"
when Province.State = "Rhode Island" then "US-RI"
when Province.State = "South Carolina" then "US-SC"
when Province.State = "South Dakota" then "US-SD"
when Province.State = "Tennessee" then "US-TN"
when Province.State = "Texas" then "US-TX"
when Province.State = "Utah" then "US-UT"
when Province.State = "Vermont" then "US-VT"
when Province.State = "Virginia" then "US-VA"
when Province.State = "Washington" then "US-WA"
when Province.State = "West Virginia" then "US-WV"
when Province.State = "Wisconsin" then "US-WI"
when Province.State = "Wyoming" then "US-WY"
when Province.State = "District of Columbia" then "US-DC"
END
-----------------------------------------------
もちろん、元のデータにRコードで「州コード」の列を追加作成する方法もありますが、データポータルに新しいデータを反映させることを考えると、データポータルの上で新しいフィールドを作成した方が簡単なので、上記の方法を採用しました。

​​--------------------------------------------------------------------------​
長さ調節可フィルターも入る2重構造!洗濯可立体仕様のケアマスク●先行受注●【メール便で送料無料】【メール便A】マスク 布マスク 男女兼用 日本製 国内生産 二重構造 フィルター効果 ユニセックス 洗える 洗濯可能 清潔 花粉症 保湿 コットン 綿

------------------------------------------------------------------------------
【もし、楽天市場で何か買い物をされる場合は、下記の楽天市場のバナーをクリックしてから、買い物をしていただけると、試作ダッシュボードの運営を支援していただくことになります】





------------------------------------------------------------------
 

-----------------------------------------------------------------------

------------------------------------------------------------------------
◆【COVID-19】国別、地域別の感染者数の推移を簡単に確認できる「DashBoard(ダッシュボード)」の試作です:新型コロナウイルスダッシュボード(Novel Coronavirus DashBoard)

2020年2月16日日曜日

◆【COVID-19】国別、地域別の感染者数や死亡者数の時系列での推移をグラフで確認できる「DashBoard(ダッシュボード)」の試作です:新型コロナウイルスダッシュボード(Novel Coronavirus Transition Graphs DashBoard)

COVID-19 Novel Coronavirus Transition Graphs DashBoard World and US.Doubling Time Chart 【COVID-19】新型コロナウイルスの国別、地域別の感染者数の日ごとの推移を簡単に確認できるダッシュボードを試作しました(Data source : JHU CSSE csse_covid_19_time_series)。世界各国とアメリカの州別の情報が豊富です。国別のグラフが利用できます。
----------------------------------------------------------------------------------------

---------------------------------------------------
-

※4月25日のデータ更新以降、データソースを、daily report から time_series のデータに変更しています。daily report の場合は、過去のデータの修正を反映する作業が簡単ではないためです。でも、フランスやニューヨーク州のデータを見ると、time_seriesのデータのメンテナンスは、あまりされていないようです。なお、アメリカの国全体のデータは、地域別データの合計の形にしているので、アメリカの「Recovered」の部分が欠けています。

JHU CSSEのダッシュボードは、地図が中心なので、時系列推移のグラフ中心のダッシュボードにしています。

グーグルの「データポータル」を利用したダッシュボードです。左下の部分、あるいはキーボードの「→」キーでページ移動ができます。

EdgeブラウザやIEブラウザなど、Chromeブラウザ以外での利用の場合はうまく表示されないことがあるようです。

↓左下の部分で、他のページに移動できます。「感染者数」や死亡者数の、国別・地域別の時系列の推移グラフが中心です。「倍加時間(doubling time)」など、新しい内容を随時追加しています。プルダウンメニューで国や州などを選択できます。
(COVID-19 Transition Graphs DashBoard : World and US)



NEW > 感染確認者数の倍加時間と感染確認者数の複合グラフのページを追加しました
NEW > アメリカの州別の日々の「感染者数」、死亡者数のページを追加しました。
NEW > 「日別の増加数(Daily New Cases , Daily New Deaths)」の表、グラフを追加しました。
NEW > 「倍加時間(doubling time)」の表、グラフを追加しました。「倍加時間(doubling time)」は、5日間の増加率を基に計算しています。
NEW > 「感染者数の100人目以降の経過日数」「死亡者数10人目以降の経過日数」のグラフを追加しました。
NEW > 実効再生産数(Estimated Reproduction Number)のページを追加しました。一定日数以上のデータがある国、地域に限っています。

【DashBoardの使い方】
・このページをリロードするとダッシュボードが更新されます。
・1ページ目上部の左側の「Country」あるいは右側の「Province.State」のプルダウンリストから「国」または「地域」を選択します。リストの項目の右側にマウスオーバーすると、「この項目のみ」と表示され、選択できます。複数選択もできます(他のページでは1項目のみ選択の場合もあります)。1項目のみ選択時に、その項目の左側にマウスオーバーして選択すると全項目選択に戻すことができます。なお、左側の「Country」と右側の「Province.State」は連動していません。1ページのグラフの下の表の数字は最新の数字になっています。
・左下の部分で、他のページに移動できます。キーボードの「→」キーでもページ送りができます。ページを随時追加しており、40ページ以上になっています。
・対数目盛のページもあります。
・棒グラフのページや地図グラフのページでは、国別のグラフをクリックすると、日別の推移の折れ線グラフの表示が絞り込まれます(「ctrlキー」を押しながらのクリックで複数選択可能)。
・アメリカの州別の推移グラフやコロプレス地図のページを追加しています。
・アニメーショングラフのページもあります。
・ダッシュボードの右下をクリックすると全画面表示にすることができます。
※「Johns Hopkins University CSSE」の「Covid19 Daily Reports」のデータを利用しています。

【不具合などの修正】
20200406 12:25:3月10日のイランの国名が他の日と異なっていたので不具合が生じていました。国名の列について、「str_replace_all(".*Iran.*","Iran")」で修正しました。
20200407 10:05:3月10日の「China SAR」の国名を「China」に修正しました。「Hong Kong SAR」を「China」に変更する際のミスでした。
20200414 10:30 4月13日の元データ(アメリカ・フロリダ州)に修正がありました。ダッシュボードに反映済みです。
20200415 10:30 現在、元データの4月14日のフランスの感染確認者数累計が前日を下回る数字になっていて、14日の増加分がマイナスになっています。現在、CSSEのダッシュボードでも前日差がマイナスになっています。WHOのデータを見てみましたが、WHOのデータとかなり違っていますね。JHU CSSEのデータには、「疑わしい症例」が含まれていて、14日からそれが除かれた、ということのようです。今のところ、さかのぼって修正されていないため、マイナスになっているようです。→ 複数のデータソースのデータが見られるように、ECDCのデータを利用した新たなダッシュボードを作成しました。
20200417 18:00 タイムシリーズデータが修正されていたので、そのデータに基づいて、フランスのデータを修正しました。4月4日~4月13日の感染確認者数のデータを修正しています。各日、2~3万人くらい数字が変更になっています。「日々の増加数に関連した部分」は未修正です。その部分は、明日の新データ追加時に修正する予定です。
20200418 09:55  フランスの「日々の感染確認者数の増加数」のデータを修正しました。
20200415 18:10 3月11日の日本の死亡者数を修正しました。3月9日の数字をデイリーリポートの数字のままににしていましたが、3月11日の1日あたり死亡者数がマイナスになっていたため、タイムシリーズデータの数字にしました。
20200425 データの更新時間が変更になっています。以前は、午前9時頃更新されていましたが、午後の更新に変更になっています。
20200426 22:20 データの更新時にエラーがあり、「日々の新規死亡者数」のデータに不具合がありました。現在、不具合は解消しています。
20200919 04:00 ロシア、スペインなど複数の国のデータが表示されないエラーを修正しました。Rのコードによる前処理で不具合が生じていたのを修正しました。データの欠損がなくなったので、世界全体計の数字も修正されました。

※国別、地域別の絞り込みは、「国名」「地域名」のテキストで行っているので、表記ゆれがあると不具合が生じます。例えば、「Singapore」では、日付によって末尾に半角スペースが入っている場合があったため、不具合が生じていました。他にもそのような不具合がある可能性がありますので予めご了承ください。不具合を見つけた場合、コメント欄にご記入いただけると助かります。また、こんなグラフや表があるといいのに、というご要望があればコメント欄にご記入ください。追加できるかどうかを検討します。



​​​​--------------------------------------------------------------------------​

【当ブログのリンクはご自由にどうぞ。もし、楽天市場で何か買い物をされる場合は、下記のバナーなどをクリックしてから、買い物をしていただけると、試作ダッシュボードの運営を支援していただくことになります。当ブログはアクセス数が多くないので、AdSenseなどの対象外です。楽天アフィリエイトだけが運営の足しになっています。】




------------------------------------------------------------------


-------------------------------------------------------------------------------


【更新しました】新型コロナウイルス感染者総数の推移グラフ:Day level information on 2019-nCoV affected cases:死亡者数の増加ペースがSARSの場合よりかなり速いのが気がかりです - One of my favorite things is ...:楽天ブログ

​​​​​​​​​​​【グラフのデータは、Kaggleのバージョン7のデータにJohns Hopkins CSSEのデータシートの「2月6日13時」のデータを追加したものです。追加データのグラフでの日付は2月5日にしています。さらに、「2月6日20時」のデータを追加しました。それから、「2月7日22時」のデータも追加しました。】 

----------------------------------------------------------------------------------------

---------------------------------------------------
-


[商品価格に関しましては、リンクが作成された時点と現時点で情報が変更されている場合がございます。]
マスクカバー 忍者 刺繍 2枚 なりきりマスク 手裏剣
価格:3000円(税別、送料別)(2020/9/10時点)


  ----------------------------------------------------------------------------------------

◆日本のインフルエンザ:「定点当たり報告数」データのまとめのダッシュボード : Influenza in Japan DashBoard:「都道府県別」のページを追加しました ----------------------------------------------------------------------------------------
よく読まれている記事一覧 | One of my favorite things is ... - 楽天ブログ