t_wの輪郭

Feedlyでフォローするボタン
tzmtwtr/tw-posts-jaGoogle Colaboratoryknownetにベクトル検索を実装Colaboratory

あれ

2023/6/14 2:01:00

私の投稿(tzmtwtr/tw-posts-ja)から文章の類似度を学習させようとしているのだけど、1回の学習(epochs=1)に190時間かかるとか出てビビった。

ColaboratoryのランタイムをTPUからGPUに切り替えて学習データを間引いたら1時間程度になった。

ベクトル検索がしたかっただけなのになぜこんなことをしているのだろう。

あれあれあれ

あれ

2023/6/14 3:42:00

転移学習が終わった。
試してみているけど結構いい感じになったと思う。転移学習前とも比較したい。

"明日はいい天気なので外出したい"と"週末は晴れるので散歩の気分だ"の類似度:0.8576
"明日はいい天気なので外出したい"と"来週の夕飯は味噌汁の予定"の類似度:0.3244
"知能増幅"と"デライト"の類似度:0.6163

あれ

2023/6/14 2:29:00

デライトの投稿は文章の近似度をAIに学習させるのに良い学習データとなる予感。

あれ

2023/6/14 2:09:00

Hugging Faceの有償プランを契約しようかしら。
AutoTrainとかいうやつが気になる。