기본 콘텐츠로 건너뛰기

facebook, Google+, Diaspora* 3종 SNS AJAX 메시지 비교

일 관계로 SNS 비슷한 걸 만들고 있는데
데이터 모델을 하기 귀찮은 관계로 남이 한걸 베낄려고 facebook, google+, diaspora 의 XHR을 분석해보고 있다.

1. facebook

역시 예상했던 대로 지저분. entries 라는 객체 밑에 app, group, page, friendlist 등이 마구 혼재
본문 내용은 초기로드시에 
<code class="hidden_elem" id="u33ari_19"><!-- <li>.... --> 이런 형태로 뿌리고 MoreStoriesPagelet 을 통해 Document 요청.
app, group, page, friendlist 같은 건 본문과는 다르게 처리했는데 뭐 닭짓 아닌가? 하긴 원래 글 한번 쓰면 못바꾸는 구조로 처음에 만들어서 별도로 처리한득.

주기적으로 pull 이라는 heartbeat(클라이언트에서 서버찌르기)을 통해 json을 받아옴.

for (;;); {"t":"heartbeat"}
{"t":"heartbeat"}
{"t":"continue","seq":2}

결과값은 이런 형태. 전세계 클라이언트로부터 DDOS 공격을 잘도 버티고 있네 ㅎㅎ

2. Google+

얘들은 성능을 위해 json 데이터 구조를 사용하지 않는다.
그럼 어떻게 하냐고?
)]}'
[[["f.ri","12015082395849449"]
,["ghr",[]
]
,["di",136,,,,,[]
,[]
,,,[]
,[]
,[]
]
,["e",4,,,125]
]]
이런식의 중첩 배열을 사용한다.
마치 C Struct로 만든 전문통신을 보는 느낌인데 데이터를 본다고 알수 있는 구조가 아니다.
물론 주고 받는 쪽에서야 몇번째는 무엇이라고 약속을 해놓아서 알고 있겠지만서도.
오버헤드가 작으니 빠르겠지.
가끔 bind 라는 요청을 보내긴 하는데 talkgadget 즉 Google talk 용이라서 실제 갱신은 facebook 처럼 heartbeat을 쏘는 구조는 아닌 듯. 아니면 일타쌍피로 같이 해결하는 건가?

3. Diaspora*

가장 알기 쉬운 구조. 실은 다 이걸 쓰기 위해 던진 떡밥임.
간단하다. stream이란 이름의 request에 인자를 사용자 id를 줘서 요청했고
https://joindiaspora.com/stream?_=<숫자형태사용자ID>

response 를 보면 정직하게 Array + JSON 형태의 게시글을 다루고 있다.
그냥 데이터만 보면 딱 답이 나옴. 아예 복붙해본다.

[{
    "id": 1850060,
    "guid": "1660cffb68109543",
    "text": "#Sculpture #Scary #Skeleton #Spider <br><br> <br> [ ![Image](http://25.media.tumblr.com/tumblr_m82nycuJDe1qehyxro1_500.jpg) ](http://ur1.ca/9wq7m) <br>Shen Shaomin - Unknown Creature No.12 <br>",
    "public": true,
    "created_at": "2012-08-07T14:00:43Z",
    "interacted_at": "2012-08-07T14:21:57Z",
    "provider_display_name": null,
    "post_type": "Reshare",
    "image_url": null,
    "object_url": null,
    "favorite": false,
    "nsfw": false,
    "author": {
        "id": 25477,
        "guid": "4d1168bc2c1743390f000930",
        "name": "\u4e97 Dr. Emporio Efikz \u4e97",
        "diaspora_id": "emporioefikz@joindiaspora.com",
        "avatar": {
            "small": "https://joindiaspora.s3.amazonaws.com/uploads/images/thumb_small_20a5e6ffea75e8195608.gif",
            "medium": "https://joindiaspora.s3.amazonaws.com/uploads/images/thumb_medium_20a5e6ffea75e8195608.gif",
            "large": "https://joindiaspora.s3.amazonaws.com/uploads/images/thumb_large_20a5e6ffea75e8195608.gif"
        }
    },
    "o_embed_cache": null,
    "mentioned_people": [],
    "photos": [],
    "frame_name": "status",
    "root": {
        "id": 1850022,
        "guid": "724c602e8ca31f97",
        "text": "#Sculpture #Scary #Skeleton #Spider <br><br> <br> [ ![Image](http://25.media.tumblr.com/tumblr_m82nycuJDe1qehyxro1_500.jpg) ](http://ur1.ca/9wq7m) <br>Shen Shaomin - Unknown Creature No.12 <br>",
        "public": true,
        "created_at": "2012-08-07T13:37:31Z",
        "interacted_at": "2012-08-07T14:18:11Z",
        "provider_display_name": null,
        "post_type": "StatusMessage",
        "image_url": null,
        "object_url": null,
        "favorite": false,
        "nsfw": false,
        "author": {
            "id": 25741,
            "guid": "4d11bd252c174338f2002a4c",
            "name": "\u24b6\u24c5\u24c4\u24c1\u24c4\u24c3\u24be\u24c8 \u2301 \u24b6\u24c5\u24bd\u24c7\u24c4\u24b9\u24be\u24c8\u24be\u24b6",
            "diaspora_id": "apolonisaphrodisia@joindiaspora.com",
            "avatar": {
                "small": "https://joindiaspora.s3.amazonaws.com/uploads/images/thumb_small_8105711c49253702d494.jpg",
                "medium": "https://joindiaspora.s3.amazonaws.com/uploads/images/thumb_medium_8105711c49253702d494.jpg",
                "large": "https://joindiaspora.s3.amazonaws.com/uploads/images/thumb_large_8105711c49253702d494.jpg"
            }
        },
        "o_embed_cache": null,
        "mentioned_people": [],
        "photos": [],
        "frame_name": "status",
        "root": null,
        "title": "#Sculpture #Scary #Skeleton #Spider <br><br> <br> [ ![Image](http://25.media.tumblr.com/tumblr_m82nycuJDe1qehyxro1_500.jpg) ](http://ur1.ca/9wq7m) <br>Shen Shaomin - Unknown Creature No.12 <br>",
        "next_post": "/posts/1850022/next",
        "previous_post": "/posts/1850022/previous",
        "interactions": {
            "likes": [],
            "reshares": [],
            "comments_count": 1,
            "likes_count": 4,
            "reshares_count": 2
        }
    },
    "title": "\u4e97 Dr. Emporio Efikz \u4e97\ub2d8\uc758 \uac8c\uc2dc\ubb3c",
    "next_post": "/posts/1850060/next",
    "previous_post": "/posts/1850060/previous",
    "interactions": {
        "likes": [],
        "reshares": [],
        "comments_count": 0,
        "likes_count": 3,
        "reshares_count": 1,
        "comments": []
    }
},
....

길지만 알기쉬운 구조. 공부가 되네.
좀 독특한 건 ping 이라는 request 를 보내는데 response 가 없다.
facebook 처럼 document도 google+처럼 다중배열도 아니다.
게다가 심지어 같은 도메인도 아니다;;
내용을 보니 https://ping.chartbeat.net 쪽으로 찌르는데 http://chartbeat.com/ 이라는 서비스가 있나보다.
실시간 트래픽 분석/통계 관리를 해주는 곳인데 상당히 깔끔. 오호 google analytics 의 실시간 버전 느낌.

자 3줄 요약
1. facebook 은 게시글을 document 로 요청. 나머지는 죄다 JSON 형태의 ajax 요청
2. Google+ 는 게시글을 ajax로 요청. 단 다중배열 [[,,],,,] 형태로 보내줌
3. Diaspora* 는 ajax 에 JSON 형태로 요청. 셋중 가장 읽을 수 있는 형태의 자료 구조를 가지고 있음.

이 블로그의 인기 게시물

ESP32 DevBoard 개봉기

오늘 드디어 손에 넣었다. ESP32 DevBoard!
Adafruit 에서 15개 한정 재입고 트윗을 보고 광속 결제.
그리고 1주일의 기다림. 사랑해요 USPS <3
알리를 이용하다보니 1주일 정도는 광속 배송임.
물론 배송비도 무자비함 -_ㅜ
15개 한정판 adafruit 발 dev board
그놈이 틀림없으렸다.
오오 강려크한 포스
ESP32_Core_board_V2라고 적혀있군요.
ESP32 맞구요. 네네. ESP32-D0WDQ6 라고 써있는데 D → Dual-core 0 → No internal flash W → Wi-Fi D → Dual-mode Bluetooth Q → Quad Flat No-leads (QFN) package 6 → 6 mm × 6 mm package body size 라고 함.
길이는 이정도
모듈크기는 이정도
코어는 6mm밖에 안해! 여기에 전기만 넣으면 BLE+WIFI!
밑에 크고 발 8개 달린 놈은 FM25Q32라고 32Mbit 플래시메모리
ESP8266 DevBoard 동생이랑 비교 크고 아름다운 레귤레이터랑 CP2102 USB Driver가 붙어있음.
ESP8266 DevBoard엔 CH340G 인데 확 작아졌네.
머리를 맞대어 보았음.
모듈크기는 아주 약간 ESP32가 더 큰데 워낙에 핀이 많고 촘촘함. ESP8266인 ESP12는 핀 간격이 2.00mm인데 비해
ESP32는 1.27mm 밖에 안함.
딱봐도 비교가 될 정도.
https://www.sparkfun.com/news/2017 크고 아름다운 Pinouts

ESP8266 보드랑 별로 안달라보인다.
http://www.silabs.com/products/mcu/pages/usbtouartbridgevcpdrivers.aspx#mac
에서 CP2102 드라이버를 설치하고
screen 으로 연결해보자.
내 경우엔 tty.SLAB_USBtoUART 로 잡혔다.
어디서 기본 속도가 115200bps 라고 들은 적이 있어서
screen /dev/tty.SLAB_USBtoUART …

즐거운 Online Prototyping Tool 들

jsbin, codepen, jsfiddle 이런 것들은 일단 생략. 너무 유명한 것들이라.

https://launchpad.graphql.com - node.js 기반 graphQL 연습장. 이것만으로도 충분히 훌륭한 백엔드
https://codesandbox.io/ npm 사용이 가능한 클라이언트 사이드 연습장. webpackbin이 너무 문제가 많아서 찾아본 것.

https://scrimba.com 이건 codesandbox+ asciinema(https://asciinema.org/) 같은 느낌인데 키 녹화와 음성 녹화 기능이 추가되었다. 다 좋은데 화살표 키로 빨리감기 뒤로감기 기능이 안되고 익스포트(youtube등)으로 지원이 없는게 아쉽다.

이 둘이 만나면? https://codesandbox.io/s/jvlrl98xw3?from-embed
뭐야 이거 무서워 하지마 ㄷㄷ;  graphql+react-native-web(부왘ㅋㅋ)

https://repl.it/languages 전통을 자랑하는 REPL 도구. 지원 언어 종류가 -_-;;;;;

https://tio.run/# repl.it? 장난함? 얘는 지원 언어가 무려 386종류. J랑 아희도 있다.

https://play.golang.org/ 즐거운 go playground. 소스 포멧팅 넘 좋아.

http://decaffeinate-project.org/repl/ 최고의 coffeescript REPL. 원래 용도는 coffee를 ecma6코드로 바꾸는 것이지만...

https://scaphold.io
https://www.graph.cool/ graphql backend service. scaphold.io는 설치도 필요없는 클라우드. graphcool은 호스팅+클라우드 다있음. 둘 다 막상막하. 푸쉬서버도 되고 뭐 미친득.

https://glitch.com/ gomix에서 결국 glitch로 안착.  node.js

https://www.shadertoy.com 잘하고 싶다! 쉐이다! 오디오도 된다!

http:/…

graphql 연습 /w launchpad

https://launchpad.graphql.com/mw9wkzv99
단순 전체쿼리+조건쿼리+추가

http://graphql.org/graphql-js/passing-arguments/
참고. random ID는 crypto 1.0.1 사용
  type Query {
    Members: [member]
    getMember(id: ID!): member
  }
  type member {
    id: ID!
    text: String
  }
  input memberInput {
    text: String
  }
  type Mutation {
    addMember(member: memberInput): member
  } SQL 정의. facebook 쪽은 스트링에 지지는 거 진짜 좋아하네. *.gql 파일이 있다고 하니 이해해주자.
resolver는 var buffer = [];
const resolvers = {
  Query: {
    Members: (root, args, context) => {
      return buffer;
    },
    getMember: (id)=> {
      return buffer.find(o=>o.id)
    }
  },
  Mutation: {
    addMember(_, {member}) {
      const mm = { ...member, id:randomBytes(10).toString('hex') };
      buffer.push(mm);
      return mm;
    }
  }
}; 평범 평범.
https://dev-blog.apollodata.com/tutorial-graphql-subscriptions-server-side-e51c32dc2951 다음으로 pub/sub 연습.
https://launchpad.graphql.com/xvn94n3ql   type Subscription {
    memberAdded: member
  } member가 added되는 순간을 감시. imp…