俺のツイッター
ちなみに強化学習の学習時にはここら辺のことは気にしなくていい 以下、注文を(価格、サイズ)で表す
サイズはロングの場合正、ショートの場合負とする
こうする事で単一の式で色々と書けるはず (p₁︎, s₁︎)→(p₂︎, s₂︎)と注文した時に価格、サイズはどう合併すべきか?リワードは?
(1) s₁︎s₂︎>0のとき
((s₁︎+s₂︎)/(s₁︎/p₁︎+s₂︎/p₂︎), s₁︎+s₂︎)とすべき
リワードはs₂︎にかかる手数料分(bybitだと0.06%)のマイナス
そういえば1倍ショートに手数料も加味しなきゃならんな (2) s₁︎s₂︎<0のとき
① |s₁︎|≧|s₂︎|のとき
(p₁︎, s₁︎+s₂︎)とすべき
リワードはs₂︎-(p₂︎/p₁︎)s₂︎[$]からs₂︎にかかる手数料を引いたもの ② |s₁︎|<|s₂︎|のとき
(p₂︎, s₁︎+s₂︎)とすべき
リワードは(p₂︎/p₁︎)s₁︎-s₁︎[$]からs₂︎にかかる手数料を引いたもの
要は今までのポジと逆の注文をした時に正のリワードが発生しうる >>28
ここは俺のツイッターなので俺はやばくない 注文のサイズは常に自分の資産(証拠金)を100$としたときの割合[$]で表す事にする
つまりはパーセンテージ
リワードを得ても無視し、100$という値は変化しない
実際に取引所で取引する場合はポジが反転するたびに基準を更新する 以上で強化学習の環境に関する議論は終わり
次にニューラルネットワークのパラメータ数を考える
第1層から順に
(4096,2048,2048,1024,512,256,256,128,64,64,7)
でどうだろう?
活性化関数はReLU 家にあるのノートPCだけだしGPUないとこのサイズは無理かな
当分はcolabとか使って凌ぐか? パラメータが過剰かも知れないのでどっかしらにDropoutを入れとくと良いかも
それにNGUとかAgent57をやりたいので内発的報酬用のネットを作らないといけないな だいたい他学部の講義の単位取れるかが履修登録後にしか分からないって何なん ハヤテのごとくとかKiss×sisとかはがないとか脳コメとか
そこら辺のラブコメが何か見返したくなってきた 投資は良い
何かしらで金を得たあとは投資・M&Aで金を増幅させる事が出来るもんな 障害記憶部…RNDを用いてα[t]を出す
エピソード記憶部…埋め込み関数+エピソードメモリ+k近傍法でr_episode[t]を出す
埋め込み関数…siamese networkで学習
以上から内部報酬r_i[t]を計算し、外部報酬と併せて報酬とする 数分おきにゲボ吐きそうな勢いで咳するカスのせいで授業頭に入らんかった
まぁつまんない講義だったのがせめてもの救い イーロン・マスクGPU買い占めってマジか
マイニングの時同様GPUが高騰しそうだなぁ マジでNVIDIA一強なのどうにかした方がいいんでねーか?
日本もGPGPU作り始めたらいいのに
ある程度売れるだろうし
でも新規性なさすぎて大丈夫だろうかとは思っちゃう VIPでアメーバピグの話を見かけた…懐かしい
メタバースの先駆けだったのにね
もう少し上手くやれなかったのか 言うてアメーバピグとアニメの話だけしか古くない
大学4年にもなれば多少はね… 変な時間に目が覚めたので睡眠導入剤として授業資料を読む 世の中ではまさに今ポケカの転売が行われてるのね
働かずにお金得られて良いなあとは思うけど、朝早くから並んだりするのは労働といえば労働だしな
勿論コスパは良いんでしょうけども これもオルタナティブ投資の一種なのかな
転売の利益って要はキャピタルゲインだよね ChatGPTの登場により自然言語処理界隈がお通夜になってるという意見をTwitterで見たがこれは明らかな間違い
いままでNLP界隈で行われてきた事がこれからの世の中を席巻する ちなみにこれはNLP系の研究室に進みたい俺の言い訳 上着着ずにインナーの白のポロシャツで外出してる人になっちゃった 木曜のこの時間4時間ほど暇になるの嫌だなぁと思ってたけど水曜に出るくそザコ課題を片付けるには悪くない なんで毎回毎回電車ギリギリに乗るのか…
走るのマジきつい 最近外部からの刺激でモチベが強制的に上げられている そういや最近ビットコの自動取引は強化学習じゃなくてもいいなとも思った
例えば午後に上がるか下がるか予想して午前中にポジ持つシステムにすればただのNNで済む 机に向かったけど集中できない
寝っ転がりながらプログラム書くか ネットサーフィンは皆の考えてる事が見えて面白い
時間が吸い取られまくってるけどな 泊まる場所探してるおっさんとネカフェの部屋をシェアする事で費用が浮いたw
俺は部屋使わないので無問題 つらい…だがここを乗り越えればオアシス…かも知れない おっさんに逃げられた
なぜ前払いにしなかったのかホンマあほ ChatGPT君に英訳させると表現がカッコよすぎる キャパオーバーでつらい
キャパがクソざこなのも萎えポイント 明日研究室だしTOEFLヤバすぎるし院試あるしインターンしてなくてやばいし
なんか負荷がすごい
TOEFLクソざこスコア取りそうだな でもみんな院行くくせにインターンしてるし…
焦ってしまう めっちゃ意識高い人と1時間くらい話した
俺もやらなきゃなぁという感じ
はぁ マジで環境に引き上げて貰ってるところ大きいかもな
不安障害治ってきたり鬱っぽいの治ってきたりしてるけど
周りのバイタリティを分けて貰ってるのかもしれん とりあえずガチガチにスケジュール管理する事は大切そうだ やっぱChatGPTの登場でNLPは死んだんだな
NLP行こうかと思ってたけどどうしよう
今までのNLPの知識詰めなきゃならないとしたら無駄だし機械学習ガリガリやらせてくれるなら行ってもいい TOEFL当日
目指すは80点だが70点台が現実的かな… 純ジャパに英語話せとか無理だよ
読む書くならまだしも まぁ70点台には乗ったかな…
unofficial scoreがリーディング23点、リスニング22点で
ライティングはちゃんと書けたので20以上は来る 飲み会くらい自分で予約しろよ
てめえがやりたいって言ったんだからてめえでやれよ 大学の授業と課題溜めすぎててヤバいなぁ
どうするかな本当 TOEFLの結果来たけど82点だった
思ってたより良かった 内訳はR:23, L:22, S:19, W:18
スピーキングが予想以上に高得点だったな
話してる内容がゴミで詰まりまくってても発音が素晴らしければ点数1桁という事は無さそう そして自信満々だったライティングが1番点数低いのは何なんだ
語数は問1で225語以上、問2で300語以上は書いたし内容もそれなりのはずなのに
文法ミスで結構引かれてる説ある