Sky Canvas AR with GenAI

## Try it. The kids love it.

www.8thwall.com/mincap/skycanvas

### Steps

1. Point your smartphone camera at the sky.

2. Press the microphone button and speak the words you want to draw.

    - Dog, Cat, Baseball, Pokemon, Japan etc.

    - "Happy Birthday", "I Love you", "Merry christmas" etc. 

3. Wait for a moment. (about 15 - 20 seconds)

4. You can see clouds in the sky.

5. Press the camera button to take a screenshot. Please share it.

### Technologies

1. Voice to Text : Web Speech API

2. Text to Image : DALL-E 2

3. Image to Cloud : I wrote the code. 

4. Cloud to Sky: 8th Wall Sky Effects

### Known Issues

- In some cases, the server is usually sleep.

so it takes a long time to start up for the first time, or image conversion does not work. If this happens, please reload your browser.

- If DALL-E 2 API usage limitations occur, images may not be converted.

- The volume must be turned up to maximum for sound effects to play on iOS (iPhone) and some Android devices.

- In some cases, in-browsers such as Twitter and Facebook also do not work well; try Chrome or Safari.

# スカイキャンバス AR with GenAI

- 声をテキストにして

- テキストを画像にして

- 画像を雲にして

- 雲を空に浮かべます

## 子供達が大好きなアプリです

### 使い方

1. スマホのカメラを空に向けます

2. マイクボタンを押して、英単語を話してください。

    - Dog, Cat, Baseball, Pokemon, Japan etc.

    - "Happy Birthday", "I Love you", "Merry christmas" etc. 

3. しばらくおまちください。（15〜20秒）

4. 空に雲が浮かびます。

5. カメラボタンをおしてスクリーンショットを撮影して、ぜひシェアしてください。

### 既知の不具合

- サーバーは通常はスリープしています。初回立ち上げ時は時間がかかったり雲が描かれなかったりするかもしれませんが、リロードして再度お試しください。

- DALL-E 2 API を利用しています。その利用制限にかかった場合は動かない場合があります。

- 音量のボリュームを最大にしていないと、効果音が聞こえない場合があります。

- Twitter や Facebook などのインブラウザでは、うまく動かないケースがあります。Chrome や Safari をご利用ください。