SlideShare a Scribd company logo
1 of 40
Download to read offline
僕らのデータ同期プラクティス
Nkzn@ウォーターセル株式会社
2015.4.25 DroidKaigi
裏おもしろそう・・・・・!!!
こっち来てくれた皆さんありがとうございます
@Nkzn (なかざん)
• 中川 幸哉 (28)
• WaterCell Inc. @ Niigata
• UIデザイナーとアーキテクトの狭間をうろう
ろしている
• 日本Androidの会 新潟支部(活動停止中)
私とAndroid
• 2009年:卒業研究でAndroid(HT-03A)
• 2010年:日本Androidの会 新潟支部立ち上げ
• 2011年:現職にJOINして農業者向けアプリ作り
• 2013年:Eclipseと決別してAndroid Studioを導入
感想文書いたら
結構話題になってビビった
Where is your user?
Where is your user?
自社アプリをオフライン化
∼試される大地∼
弊社サービスについて
• アグリノート

http://www.agri-note.jp
• 農業生産者向けの農作業管理システム
• Webブラウザ版、Androidアプリで提供

iOS版は開発準備中
• 農業版Redmineに近づいてる
水稲/コシヒカリ ほ場:A-2
作業予定・記録
日付
作業項目
作業者・作業時間
農薬名・使用量
肥料名・使用量
機械
写真
メモ
マスタデータと
トランザクションデータ
ファーストバージョン
2012年3月リリース。
画面開いた時にフェッチしてくるやーつ。
=電波がないところでは動かない
30km
(電波が)
試される大地
気合で同期機能を実装する
AlarmManager + IntentService ???
同期処理に必要なもの
• 定期的に、または何らかのキックにより
• バックグラウンドで通信を行い
• アプリ内のDBを更新する
2013年スタイル
AlarmManager
IntentService
頑張ってデータを
ダウンロードしてきて
INSERTする処理
Intent
定期的に実行
れ出るつらみ
• AlarmManagerがときどき消える
• IntentServiceが連続で走って止まらない
• マルチスレッドでDB叩く状態に突入
• synchronized祭り
• ネットワーク有無の検知のために割と頻繁に起動
Androidが提供するデータ同期機能
AccountAuthenticator + SyncAdapter + ContentProvider
AndroidManifest.xml
SyncService xml/authenticator.xml
<service>
xml/sync_adapter.xml
<service><provider>
authorities ContentProvider
SyncAdapter
contentAuthority
accountType
accountType
onPerformSync()
同期処理を実装
SyncAdapter利用の最小構成 クラス
ファイル
パラメータ
凡例:
AuthenticationService
AccountAuthenticator
本当に大事なのは
onPerformSyncの中で何をするか
public class SyncAdapter extends AbstractThreadedSyncAdapter {
// ...
@Override
public void onPerformSync(Account account, Bundle extras,
String authority, ContentProviderClient provider,
SyncResult syncResult) {
/* Elegant Synchronization */
}
// ...
}
設計を分けれるの嬉しい
ContentProvider
SQLite
Data Access Object
UI付近のコード SyncAdapter
API Client
AccountAuthenticator
AccountManager
使ってる人が少ない気がする
ドキュメンテッドになったのが
割と最近?
2013年まで公式ドキュメントなかったっぽ
い・・・?(Web Archive調べ)
突然情報が出始めた
2009年 2010年 2011年 2012年 2013年 2014年
Android 2.0 Google I/Oで言及
50 Android Hacks
公式ドキュメントが公開?
50 Android Hacks日本語版
mixi-inc/AndroidTraining
弊社もこの頃から
触り始めた
同期アルゴリズムの検討
参考にした資料
• 50 Android Hacksのサンプルコード
• https://github.com/Macarse/50AH-code/
• Hack 23(Pythonサーバー付き)
• Evernote Synchronization via EDAM
• https://dev.evernote.com/intl/jp/doc/articles/
synchronization.php
• https://github.com/ninjinkun/EDAMSync/blob/master/EDAM-
Japanese.md (日本語訳)
採用した仕組み
• Full Sync, Incremental Sync
• StatusFlag("dirty" flag)
Full Sync, Incremental Sync
サーバー
クライアント
1 2 3
1 2 3
1 2 3
1 2
3
Full Sync Incremental Sync
差分を請求する
id data modified_at
1 hoge 10:00
2 fuga" 12:00
3 piyo" 15:00
4 hogehoge" 20:00
http://hoge/hoge?modified_after=13:00
last_fetched = 13:00
StatusFlag ("dirty" flag)
未同期のクライアント環境でデータに変更が
あったことを表すフラグ
4つのStatus
CLEAN サーバーから受け取ったままの状態
ADD
新規に作成された
(まだクライアント側にしかない)
MOD サーバーから受け取ったものに変更を施した
DELETE サーバーから受け取ったものを削除した
同期の流れ
同期の流れ
1. データのダウンロードを行う
• 初回はFull Sync, 2回目以降はIncremental Sync
2. サーバーで削除されていたデータをクライアントでも削除する
3. サーバーで更新されていたデータをクライアントでも更新する
4. クライアント側で作成(ADD)・更新(MOD)・削除(DELETE)されたデータ
をサーバへ送信する
5. 送信が済んだデータのStatusFlagをCLEANにする
6. last_fetchedを1の時刻に更新する
競合問題
> 2. サーバーで削除されていたデータをクライアントでも削除する
> 3. サーバーで更新されていたデータをクライアントでも更新する
同じデータの削除や更新がサーバーとクライアント両方で行われてい
た場合、競合する
対応策
• 常にサーバー側が勝つ
• 送信を諦める
• 常にクライアント側が勝つ
• サーバーからのデータを捨てる
• クライアント側でマージしてからサーバーへ送る
• なんとか全部生かす
Evernoteはこれ
アグリノートはこれ
同期パターンの確認
まとめ
• mixi-inc/AndroidTrainingでSyncAdapterを勉強して
• 50AHでSyncAdapterのサンプルを知って
• EDAMの理屈を参考にして同期の仕組みを考える
• 競合解決の方針はそのサービスのポリシー次第
最後に
ウォーターセル株式会社では、地球人口100億の時
代に見合う食料生産のための農業革命を一緒に引っ
張っていってくれるAndroid/iOSエンジニアを探し
ています。

More Related Content

What's hot

MHA for MySQLとDeNAのオープンソースの話
MHA for MySQLとDeNAのオープンソースの話MHA for MySQLとDeNAのオープンソースの話
MHA for MySQLとDeNAのオープンソースの話
Yoshinori Matsunobu
 

What's hot (20)

GraalVMの多言語実行機能が凄そうだったので試しにApache Sparkに組み込んで動かしてみたけどちょっとまだ早かったかもしれない(Open So...
GraalVMの多言語実行機能が凄そうだったので試しにApache Sparkに組み込んで動かしてみたけどちょっとまだ早かったかもしれない(Open So...GraalVMの多言語実行機能が凄そうだったので試しにApache Sparkに組み込んで動かしてみたけどちょっとまだ早かったかもしれない(Open So...
GraalVMの多言語実行機能が凄そうだったので試しにApache Sparkに組み込んで動かしてみたけどちょっとまだ早かったかもしれない(Open So...
 
Elasticsearchを使うときの注意点 公開用スライド
Elasticsearchを使うときの注意点 公開用スライドElasticsearchを使うときの注意点 公開用スライド
Elasticsearchを使うときの注意点 公開用スライド
 
DNSキャッシュサーバ チューニングの勘所
DNSキャッシュサーバ チューニングの勘所DNSキャッシュサーバ チューニングの勘所
DNSキャッシュサーバ チューニングの勘所
 
超実践 Cloud Spanner 設計講座
超実践 Cloud Spanner 設計講座超実践 Cloud Spanner 設計講座
超実践 Cloud Spanner 設計講座
 
GoによるWebアプリ開発のキホン
GoによるWebアプリ開発のキホンGoによるWebアプリ開発のキホン
GoによるWebアプリ開発のキホン
 
MongoDBが遅いときの切り分け方法
MongoDBが遅いときの切り分け方法MongoDBが遅いときの切り分け方法
MongoDBが遅いときの切り分け方法
 
RDB技術者のためのNoSQLガイド NoSQLの必要性と位置づけ
RDB技術者のためのNoSQLガイド NoSQLの必要性と位置づけRDB技術者のためのNoSQLガイド NoSQLの必要性と位置づけ
RDB技術者のためのNoSQLガイド NoSQLの必要性と位置づけ
 
インフラエンジニアの綺麗で優しい手順書の書き方
インフラエンジニアの綺麗で優しい手順書の書き方インフラエンジニアの綺麗で優しい手順書の書き方
インフラエンジニアの綺麗で優しい手順書の書き方
 
gRPC入門
gRPC入門gRPC入門
gRPC入門
 
Dragon: A Distributed Object Storage at Yahoo! JAPAN (WebDB Forum 2017)
Dragon: A Distributed Object Storage at Yahoo! JAPAN (WebDB Forum 2017)Dragon: A Distributed Object Storage at Yahoo! JAPAN (WebDB Forum 2017)
Dragon: A Distributed Object Storage at Yahoo! JAPAN (WebDB Forum 2017)
 
Azure Api Management 俺的マニュアル 2020年3月版
Azure Api Management 俺的マニュアル 2020年3月版Azure Api Management 俺的マニュアル 2020年3月版
Azure Api Management 俺的マニュアル 2020年3月版
 
MHA for MySQLとDeNAのオープンソースの話
MHA for MySQLとDeNAのオープンソースの話MHA for MySQLとDeNAのオープンソースの話
MHA for MySQLとDeNAのオープンソースの話
 
メルカリ・ソウゾウでは どうGoを活用しているのか?
メルカリ・ソウゾウでは どうGoを活用しているのか?メルカリ・ソウゾウでは どうGoを活用しているのか?
メルカリ・ソウゾウでは どうGoを活用しているのか?
 
ブレソルでテラバイト級データのALTERを短時間で終わらせる
ブレソルでテラバイト級データのALTERを短時間で終わらせるブレソルでテラバイト級データのALTERを短時間で終わらせる
ブレソルでテラバイト級データのALTERを短時間で終わらせる
 
Apache Airflow 概要(Airflowの基礎を学ぶハンズオンワークショップ 発表資料)
Apache Airflow 概要(Airflowの基礎を学ぶハンズオンワークショップ 発表資料)Apache Airflow 概要(Airflowの基礎を学ぶハンズオンワークショップ 発表資料)
Apache Airflow 概要(Airflowの基礎を学ぶハンズオンワークショップ 発表資料)
 
MySQL・PostgreSQLだけで作る高速あいまい全文検索システム
MySQL・PostgreSQLだけで作る高速あいまい全文検索システムMySQL・PostgreSQLだけで作る高速あいまい全文検索システム
MySQL・PostgreSQLだけで作る高速あいまい全文検索システム
 
分散システムについて語らせてくれ
分散システムについて語らせてくれ分散システムについて語らせてくれ
分散システムについて語らせてくれ
 
Dockerからcontainerdへの移行
Dockerからcontainerdへの移行Dockerからcontainerdへの移行
Dockerからcontainerdへの移行
 
ネットワーク ゲームにおけるTCPとUDPの使い分け
ネットワーク ゲームにおけるTCPとUDPの使い分けネットワーク ゲームにおけるTCPとUDPの使い分け
ネットワーク ゲームにおけるTCPとUDPの使い分け
 
クラウドネイティブ時代の分散トレーシング - Distributed Tracing in a Cloud Native Age
クラウドネイティブ時代の分散トレーシング - Distributed Tracing in a Cloud Native Ageクラウドネイティブ時代の分散トレーシング - Distributed Tracing in a Cloud Native Age
クラウドネイティブ時代の分散トレーシング - Distributed Tracing in a Cloud Native Age
 

Similar to 僕らのデータ同期プラクティス

EDIX2015 デジタル教科書の未来と学校ICT
EDIX2015 デジタル教科書の未来と学校ICTEDIX2015 デジタル教科書の未来と学校ICT
EDIX2015 デジタル教科書の未来と学校ICT
Naoki Kato
 
香川支部キックオフ 香川支部について
香川支部キックオフ 香川支部について香川支部キックオフ 香川支部について
香川支部キックオフ 香川支部について
yohei iwakura
 

Similar to 僕らのデータ同期プラクティス (20)

デブサミ関西2011 JAZ紹介
デブサミ関西2011 JAZ紹介デブサミ関西2011 JAZ紹介
デブサミ関西2011 JAZ紹介
 
垣根のないモノ作り!
垣根のないモノ作り!垣根のないモノ作り!
垣根のないモノ作り!
 
北陸エンジニアず 自己紹介資料
北陸エンジニアず 自己紹介資料北陸エンジニアず 自己紹介資料
北陸エンジニアず 自己紹介資料
 
Androidとインターネット連携
Androidとインターネット連携Androidとインターネット連携
Androidとインターネット連携
 
iPhone/Android アプリをまとめて省エネ開発する技術
iPhone/Android アプリをまとめて省エネ開発する技術iPhone/Android アプリをまとめて省エネ開発する技術
iPhone/Android アプリをまとめて省エネ開発する技術
 
Android IoTとプログラミング教育
Android IoTとプログラミング教育Android IoTとプログラミング教育
Android IoTとプログラミング教育
 
Io t最初の一歩
Io t最初の一歩Io t最初の一歩
Io t最初の一歩
 
Cloud9のはじめかた
Cloud9のはじめかたCloud9のはじめかた
Cloud9のはじめかた
 
ネイティブ原理主義
ネイティブ原理主義ネイティブ原理主義
ネイティブ原理主義
 
Global Solution Unit
Global Solution UnitGlobal Solution Unit
Global Solution Unit
 
ロボットアプリ開発におけるNode-REDの活用
ロボットアプリ開発におけるNode-REDの活用ロボットアプリ開発におけるNode-REDの活用
ロボットアプリ開発におけるNode-REDの活用
 
開発を効率的に進めるられるまでの道程
開発を効率的に進めるられるまでの道程開発を効率的に進めるられるまでの道程
開発を効率的に進めるられるまでの道程
 
EDIX2015 デジタル教科書の未来と学校ICT
EDIX2015 デジタル教科書の未来と学校ICTEDIX2015 デジタル教科書の未来と学校ICT
EDIX2015 デジタル教科書の未来と学校ICT
 
【Tokyowebmining】open compute project
【Tokyowebmining】open compute project 【Tokyowebmining】open compute project
【Tokyowebmining】open compute project
 
香川支部キックオフ 香川支部について
香川支部キックオフ 香川支部について香川支部キックオフ 香川支部について
香川支部キックオフ 香川支部について
 
IoTで5days学生インターン
IoTで5days学生インターンIoTで5days学生インターン
IoTで5days学生インターン
 
第1回八子クラウドナイト事前配布・趣旨説明資料です。 20170714
第1回八子クラウドナイト事前配布・趣旨説明資料です。 20170714第1回八子クラウドナイト事前配布・趣旨説明資料です。 20170714
第1回八子クラウドナイト事前配布・趣旨説明資料です。 20170714
 
Microsoft Azure で スマホからIoTまで
Microsoft AzureでスマホからIoTまでMicrosoft AzureでスマホからIoTまで
Microsoft Azure で スマホからIoTまで
 
LoRa入門
LoRa入門LoRa入門
LoRa入門
 
Android Lintを覚えてベテラン開発者に追いつこう #ndsmeetup
Android Lintを覚えてベテラン開発者に追いつこう #ndsmeetupAndroid Lintを覚えてベテラン開発者に追いつこう #ndsmeetup
Android Lintを覚えてベテラン開発者に追いつこう #ndsmeetup
 

More from Yukiya Nakagawa

React Nativeはクロスプラットフォームモバイルアプリ開発の夢を見るか #DroidKaigi
React Nativeはクロスプラットフォームモバイルアプリ開発の夢を見るか #DroidKaigiReact Nativeはクロスプラットフォームモバイルアプリ開発の夢を見るか #DroidKaigi
React Nativeはクロスプラットフォームモバイルアプリ開発の夢を見るか #DroidKaigi
Yukiya Nakagawa
 
PechaKucha Niigata #3 2013.7.27
PechaKucha Niigata #3 2013.7.27PechaKucha Niigata #3 2013.7.27
PechaKucha Niigata #3 2013.7.27
Yukiya Nakagawa
 

More from Yukiya Nakagawa (20)

Atomic Designは「マルチ」で真価を発揮する
Atomic Designは「マルチ」で真価を発揮するAtomic Designは「マルチ」で真価を発揮する
Atomic Designは「マルチ」で真価を発揮する
 
Androidの入門書を書いたときに気にしたこと #NDS57
Androidの入門書を書いたときに気にしたこと #NDS57Androidの入門書を書いたときに気にしたこと #NDS57
Androidの入門書を書いたときに気にしたこと #NDS57
 
React Nativeの光と闇
React Nativeの光と闇React Nativeの光と闇
React Nativeの光と闇
 
アグリノートにおけるGIS情報を活かした圃場・作付管理の取り組み @ FOSS4GJ
アグリノートにおけるGIS情報を活かした圃場・作付管理の取り組み @ FOSS4GJアグリノートにおけるGIS情報を活かした圃場・作付管理の取り組み @ FOSS4GJ
アグリノートにおけるGIS情報を活かした圃場・作付管理の取り組み @ FOSS4GJ
 
React Native Androidはなぜ動くのか
React Native Androidはなぜ動くのかReact Native Androidはなぜ動くのか
React Native Androidはなぜ動くのか
 
CSS in JSの話 #friday13json
CSS in JSの話 #friday13jsonCSS in JSの話 #friday13json
CSS in JSの話 #friday13json
 
React Nativeアプリをリリースし続けるために、最初に行う8つの取り組み
React Nativeアプリをリリースし続けるために、最初に行う8つの取り組みReact Nativeアプリをリリースし続けるために、最初に行う8つの取り組み
React Nativeアプリをリリースし続けるために、最初に行う8つの取り組み
 
React Nativeはクロスプラットフォームモバイルアプリ開発の夢を見るか #DroidKaigi
React Nativeはクロスプラットフォームモバイルアプリ開発の夢を見るか #DroidKaigiReact Nativeはクロスプラットフォームモバイルアプリ開発の夢を見るか #DroidKaigi
React Nativeはクロスプラットフォームモバイルアプリ開発の夢を見るか #DroidKaigi
 
AndroidLint #DroidKaigi
AndroidLint #DroidKaigiAndroidLint #DroidKaigi
AndroidLint #DroidKaigi
 
Android再入門 〜Eclipseのことは忘れろ〜
Android再入門 〜Eclipseのことは忘れろ〜Android再入門 〜Eclipseのことは忘れろ〜
Android再入門 〜Eclipseのことは忘れろ〜
 
もう一度Kotlinの話をしよう #ndsmeetup4
もう一度Kotlinの話をしよう #ndsmeetup4もう一度Kotlinの話をしよう #ndsmeetup4
もう一度Kotlinの話をしよう #ndsmeetup4
 
アグリノートを支える技術
アグリノートを支える技術アグリノートを支える技術
アグリノートを支える技術
 
NDS36 Kotlin Cute
NDS36 Kotlin CuteNDS36 Kotlin Cute
NDS36 Kotlin Cute
 
NDS36 Java7&Java8
NDS36 Java7&Java8NDS36 Java7&Java8
NDS36 Java7&Java8
 
Coworking Business Forum in NIIGATA 2013
Coworking Business Forum in NIIGATA 2013Coworking Business Forum in NIIGATA 2013
Coworking Business Forum in NIIGATA 2013
 
Niigata.rb#03
Niigata.rb#03Niigata.rb#03
Niigata.rb#03
 
PechaKucha Niigata #3 2013.7.27
PechaKucha Niigata #3 2013.7.27PechaKucha Niigata #3 2013.7.27
PechaKucha Niigata #3 2013.7.27
 
ぼくのかんがえたふつうのあんどろいどかいはつ
ぼくのかんがえたふつうのあんどろいどかいはつぼくのかんがえたふつうのあんどろいどかいはつ
ぼくのかんがえたふつうのあんどろいどかいはつ
 
Androidで使えるJSON-Javaライブラリ
Androidで使えるJSON-JavaライブラリAndroidで使えるJSON-Javaライブラリ
Androidで使えるJSON-Javaライブラリ
 
NFCLAB会津
NFCLAB会津NFCLAB会津
NFCLAB会津
 

僕らのデータ同期プラクティス