俺のツイッター
機械学習のためには取引をシミュレート出来なければならない
テイカーで売り買いした時、ポジションを一纏めにするタイプの取引所をシミュレートする 証拠金: a[btc]
まず価格p₁︎[$/btc]でs[$]ロングしたとする
価格p₂︎[$/btc]でs[$]ショートした時利潤は?
↓
s/p₁︎-s/p₂︎[btc] 強化学習のリワードとして利潤を用いたいけど、単位はbtcで良いのだろうか
ドルに換算した方がいいか、或いはパーセンテージにした方がいいか… さらに、証拠金a[btc]の価値がビットコの価格に左右されるのもまずい
常に1倍ショートしとく事にして、その上でトレードをさせた方が良くないか 常に1倍ショートを入れておく事にしよう
取引所上では他のポジを持った時にこのショートと合併されてしまうが、AIの思考の中では分離しておく事にする ロングポジの時にロングするか、ショートポジの時にショートした場合
ポジションが合併される
価格p₁︎、サイズs₁︎のロングと価格p₂︎、サイズs₂︎のロングを合併すると
サイズs₁︎+s₂︎、価格(s₁︎+s₂︎)/(s₁︎/p₁︎+s₂︎/p₂︎)
これはショートでも同じ リワードに関しては、やはりドルで考えるべきかと思う
ビットコは安定的な資産では無いので、、
とりあえずリワードが確定した時の価格でリワードをドルに換算し、1倍ショートの対象に加える つまり
価格p₁︎、サイズsでロングしたあと価格p₂︎で決済すると、(s/p₁︎-s/p₂︎)[btc]のリターンを得るわけだが、これを1倍ショートするので
(p₂︎/p₁︎)s-s[$]分余計にショートしなければならない
(p₁︎,s)のロングを価格p₂︎で決済するにはサイズ(p₂︎/p₁︎)sのショートを入れるという事 これはp₁︎>p₂︎の場合も成り立つ
さらにショートとロングの順が逆でも成り立つ ちなみに強化学習の学習時にはここら辺のことは気にしなくていい 以下、注文を(価格、サイズ)で表す
サイズはロングの場合正、ショートの場合負とする
こうする事で単一の式で色々と書けるはず (p₁︎, s₁︎)→(p₂︎, s₂︎)と注文した時に価格、サイズはどう合併すべきか?リワードは?
(1) s₁︎s₂︎>0のとき
((s₁︎+s₂︎)/(s₁︎/p₁︎+s₂︎/p₂︎), s₁︎+s₂︎)とすべき
リワードはs₂︎にかかる手数料分(bybitだと0.06%)のマイナス
そういえば1倍ショートに手数料も加味しなきゃならんな (2) s₁︎s₂︎<0のとき
① |s₁︎|≧|s₂︎|のとき
(p₁︎, s₁︎+s₂︎)とすべき
リワードはs₂︎-(p₂︎/p₁︎)s₂︎[$]からs₂︎にかかる手数料を引いたもの ② |s₁︎|<|s₂︎|のとき
(p₂︎, s₁︎+s₂︎)とすべき
リワードは(p₂︎/p₁︎)s₁︎-s₁︎[$]からs₂︎にかかる手数料を引いたもの
要は今までのポジと逆の注文をした時に正のリワードが発生しうる >>28
ここは俺のツイッターなので俺はやばくない 注文のサイズは常に自分の資産(証拠金)を100$としたときの割合[$]で表す事にする
つまりはパーセンテージ
リワードを得ても無視し、100$という値は変化しない
実際に取引所で取引する場合はポジが反転するたびに基準を更新する 以上で強化学習の環境に関する議論は終わり
次にニューラルネットワークのパラメータ数を考える
第1層から順に
(4096,2048,2048,1024,512,256,256,128,64,64,7)
でどうだろう?
活性化関数はReLU 家にあるのノートPCだけだしGPUないとこのサイズは無理かな
当分はcolabとか使って凌ぐか? パラメータが過剰かも知れないのでどっかしらにDropoutを入れとくと良いかも
それにNGUとかAgent57をやりたいので内発的報酬用のネットを作らないといけないな だいたい他学部の講義の単位取れるかが履修登録後にしか分からないって何なん ハヤテのごとくとかKiss×sisとかはがないとか脳コメとか
そこら辺のラブコメが何か見返したくなってきた 投資は良い
何かしらで金を得たあとは投資・M&Aで金を増幅させる事が出来るもんな 障害記憶部…RNDを用いてα[t]を出す
エピソード記憶部…埋め込み関数+エピソードメモリ+k近傍法でr_episode[t]を出す
埋め込み関数…siamese networkで学習
以上から内部報酬r_i[t]を計算し、外部報酬と併せて報酬とする 数分おきにゲボ吐きそうな勢いで咳するカスのせいで授業頭に入らんかった
まぁつまんない講義だったのがせめてもの救い イーロン・マスクGPU買い占めってマジか
マイニングの時同様GPUが高騰しそうだなぁ マジでNVIDIA一強なのどうにかした方がいいんでねーか?
日本もGPGPU作り始めたらいいのに
ある程度売れるだろうし
でも新規性なさすぎて大丈夫だろうかとは思っちゃう VIPでアメーバピグの話を見かけた…懐かしい
メタバースの先駆けだったのにね
もう少し上手くやれなかったのか 言うてアメーバピグとアニメの話だけしか古くない
大学4年にもなれば多少はね… 変な時間に目が覚めたので睡眠導入剤として授業資料を読む 世の中ではまさに今ポケカの転売が行われてるのね
働かずにお金得られて良いなあとは思うけど、朝早くから並んだりするのは労働といえば労働だしな
勿論コスパは良いんでしょうけども これもオルタナティブ投資の一種なのかな
転売の利益って要はキャピタルゲインだよね ChatGPTの登場により自然言語処理界隈がお通夜になってるという意見をTwitterで見たがこれは明らかな間違い
いままでNLP界隈で行われてきた事がこれからの世の中を席巻する ちなみにこれはNLP系の研究室に進みたい俺の言い訳 上着着ずにインナーの白のポロシャツで外出してる人になっちゃった 木曜のこの時間4時間ほど暇になるの嫌だなぁと思ってたけど水曜に出るくそザコ課題を片付けるには悪くない なんで毎回毎回電車ギリギリに乗るのか…
走るのマジきつい 最近外部からの刺激でモチベが強制的に上げられている そういや最近ビットコの自動取引は強化学習じゃなくてもいいなとも思った
例えば午後に上がるか下がるか予想して午前中にポジ持つシステムにすればただのNNで済む 机に向かったけど集中できない
寝っ転がりながらプログラム書くか ネットサーフィンは皆の考えてる事が見えて面白い
時間が吸い取られまくってるけどな 泊まる場所探してるおっさんとネカフェの部屋をシェアする事で費用が浮いたw
俺は部屋使わないので無問題 つらい…だがここを乗り越えればオアシス…かも知れない おっさんに逃げられた
なぜ前払いにしなかったのかホンマあほ ChatGPT君に英訳させると表現がカッコよすぎる キャパオーバーでつらい
キャパがクソざこなのも萎えポイント 明日研究室だしTOEFLヤバすぎるし院試あるしインターンしてなくてやばいし
なんか負荷がすごい
TOEFLクソざこスコア取りそうだな でもみんな院行くくせにインターンしてるし…
焦ってしまう めっちゃ意識高い人と1時間くらい話した
俺もやらなきゃなぁという感じ
はぁ マジで環境に引き上げて貰ってるところ大きいかもな
不安障害治ってきたり鬱っぽいの治ってきたりしてるけど
周りのバイタリティを分けて貰ってるのかもしれん とりあえずガチガチにスケジュール管理する事は大切そうだ やっぱChatGPTの登場でNLPは死んだんだな
NLP行こうかと思ってたけどどうしよう
今までのNLPの知識詰めなきゃならないとしたら無駄だし機械学習ガリガリやらせてくれるなら行ってもいい TOEFL当日
目指すは80点だが70点台が現実的かな… 純ジャパに英語話せとか無理だよ
読む書くならまだしも まぁ70点台には乗ったかな…
unofficial scoreがリーディング23点、リスニング22点で
ライティングはちゃんと書けたので20以上は来る 飲み会くらい自分で予約しろよ
てめえがやりたいって言ったんだからてめえでやれよ 大学の授業と課題溜めすぎててヤバいなぁ
どうするかな本当 TOEFLの結果来たけど82点だった
思ってたより良かった 内訳はR:23, L:22, S:19, W:18
スピーキングが予想以上に高得点だったな
話してる内容がゴミで詰まりまくってても発音が素晴らしければ点数1桁という事は無さそう そして自信満々だったライティングが1番点数低いのは何なんだ
語数は問1で225語以上、問2で300語以上は書いたし内容もそれなりのはずなのに
文法ミスで結構引かれてる説ある まぁ何はともあれ院試でTOEFLがネックになる事はなさそうで良かった 絶対落ちたと思ってた某社のコーディング試験通った
けど面接の倍率クソ高そう 1000円カットに見切りをつけ4400円の美容室に行ってきた
今まではカットはガチャという感じだったけど少し高いだけでかなり安定感が高くなるね
これからはちゃんとしよう そういえば今朝Amazonアカウントがロックされたのでカスタマーセンターに問い合わせたら
俺の買ったものの請求が他人に行っていたらしい
カード番号の間違いが原因だと言うけど、買った瞬間にカードの正当性の検証しないのかよ…という
しかもカードの登録はAmazonアプリのカメラ機能で自動的に読んだものだし
しっかりして欲しい GPT-3はマジで論文解読ツールとして申し分ないな
本当に助かる 遅刻しそうになってめちゃくちゃ急ぐのやめたい
しかも間に合わなそう かもな…
それはそうと単位を落としかねない状態をどうにかしなければ 大学の小研究の題材にに自分の趣味を宛てがう事はなかなか良い
やる気ゼロでも強制的に作りたいものが完成する やる気全然出なくてつらい
なぜ何もする気にならないのか… やる気を出す方法調べてもそれをするやる気すら起きない無限ループ そりゃ鯖テスト用の板なんかパクらないよな
過疎板探して移住するのもあり だね
どうするかなぁ…
むかし夢・独り言板でスレ立てたこともあるけど、あそこはそれなりに人がいるから落ちる危険もある とりあえず暫く経過観察で
状況が落ち着いたらここに留まるか移住するか考えよ Twinkleをアプデして外部版に板を追加するとtalkではなく5chを見る事が出来るらしい
専ブラからここに来れるようになったので、ここに留まろうかな
今後の5chの衰退具合によっては移動を考える クーデター失敗した感じするから問題なさそう
むこうを見てないからわからないけど サボってた分単位落としそうになっててそのリカバリーで死にそうだった
結局2単位落としたけど留年は回避できた
あと院試の勉強もしてたな
院試は既に終わったけどあの出来では落ちたかもしれん 落ちたら行くあてが無いなあ
とりあえず落ちたら休学しかない 滑り止め受けるって選択肢もあったはずだけど数ヶ月前はその考えに至らなかったな
落ちたら冬に他大の大学院受けるか、もしくは休学+就活だな 留年は金がかかるから休学なのね
卒論とかどういう扱いになるんだろ 卒論は来学期から始まるから休学しても影響はないと思う まぁ選ばなきゃ余裕なのはそうだけど…
お給料は周りと同じくらいは欲しいな いまから始めるんじゃ流石にねえ…
お給料もだけど会社の雰囲気や残業時間とかも大事よ
残業時間多いから同期より給料倍ってのも違うでしょ 確かに激務は嫌だね
色んなとこ比較検討しなきゃな… ついに卒論の時期
英語必須かつ放任主義の研究室だがどうしたものか それなら大丈夫
締め切り間近になったらケツ叩いてくれるよ なぜかずっとTwinkleでここに書き込めなくて今bb2cで試したら行けた 現在までの変化は、卒論が終わり卒業に必要な単位も何とか取れたってところだ
最近はずっと仮想通貨や株について考えてる お疲れー
無事終わったようで何より
仮想通貨また上がってきてるしいい感じだよね ありがとう
仮想通貨はbtcの半減期も近いしいい感じだね