Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

モデルのマージに球面線形補間を使えるようにした #75

Merged
merged 9 commits into from
Feb 27, 2024

Conversation

frodo821
Copy link

モデルのマージに線形補間だけではなく、球面線形補間を使えるようにしました。

image

@litagin02 litagin02 changed the base branch from master to dev February 27, 2024 03:41
@litagin02
Copy link
Owner

ありがとうございます。取り入れたいと思います。
球面線形補間については初めて知ったのですが、マージについては効果は何か通常の線形補完と振る舞いが変わったりするのでしょうか?

@frodo821
Copy link
Author

通常の線形補間によるモデルの補間よりもより自然なマージ結果になるみたいです。
高次元ベクトルの正規分布の平均値は一般に超球面上に分布することが知られていて、その結果(?)超球面を無視して直線で補間するよりも、超球面上を滑るように補間する球面補間のほうがよりスムーズに補間できるらしい

@litagin02 litagin02 merged commit abd5347 into litagin02:dev Feb 27, 2024
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

Successfully merging this pull request may close these issues.

2 participants