iceshrimp-legacy/packages/backend/src/misc/populate-emojis.ts

166 lines
5 KiB
TypeScript
Raw Normal View History

2023-01-13 05:40:33 +01:00
import { In, IsNull } from "typeorm";
import { Emojis } from "@/models/index.js";
import type { Emoji } from "@/models/entities/emoji.js";
import type { Note } from "@/models/entities/note.js";
import { Cache } from "./cache.js";
import { isSelfHost, toPunyNullable } from "./convert-host.js";
import { decodeReaction } from "./reaction-lib.js";
import config from "@/config/index.js";
import { query } from "@/prelude/url.js";
2021-03-22 04:46:46 +01:00
const cache = new Cache<Emoji | null>(1000 * 60 * 60 * 12);
/**
*
*/
type PopulatedEmoji = {
name: string;
url: string;
};
2023-01-13 05:40:33 +01:00
function normalizeHost(
src: string | undefined,
noteUserHost: string | null,
): string | null {
2021-03-22 04:36:57 +01:00
// クエリに使うホスト
2023-01-13 05:40:33 +01:00
let host =
src === "."
? null // .はローカルホスト (ここがマッチするのはリアクションのみ)
: src === undefined
? noteUserHost // ノートなどでホスト省略表記の場合はローカルホスト (ここがリアクションにマッチすることはない)
: isSelfHost(src)
? null // 自ホスト指定
: src || noteUserHost; // 指定されたホスト || ノートなどの所有者のホスト (こっちがリアクションにマッチすることはない)
2021-03-22 04:36:57 +01:00
host = toPunyNullable(host);
return host;
}
function parseEmojiStr(emojiName: string, noteUserHost: string | null) {
const match = emojiName.match(/^(\w+)(?:@([\w.-]+))?$/);
if (!match) return { name: null, host: null };
const name = match[1];
// ホスト正規化
const host = toPunyNullable(normalizeHost(match[2], noteUserHost));
return { name, host };
}
/**
*
* @param emojiName (:, @. (decodeReactionで可能))
2021-03-21 16:45:14 +01:00
* @param noteUserHost
* @returns , nullは未マッチを意味する
*/
2023-01-13 05:40:33 +01:00
export async function populateEmoji(
emojiName: string,
noteUserHost: string | null,
): Promise<PopulatedEmoji | null> {
2021-03-22 04:36:57 +01:00
const { name, host } = parseEmojiStr(emojiName, noteUserHost);
if (name == null) return null;
2023-01-13 05:40:33 +01:00
const queryOrNull = async () =>
(await Emojis.findOneBy({
name,
host: host ?? IsNull(),
})) || null;
const emoji = await cache.fetch(`${name} ${host}`, queryOrNull);
if (emoji == null) return null;
const isLocal = emoji.host == null;
const emojiUrl = emoji.publicUrl || emoji.originalUrl; // || emoji.originalUrl してるのは後方互換性のため
2023-01-13 05:40:33 +01:00
const url = isLocal
? emojiUrl
: `${config.url}/proxy/${encodeURIComponent(
new URL(emojiUrl).pathname,
)}?${query({ url: emojiUrl })}`;
return {
name: emojiName,
url,
};
}
/**
* (, )
*/
2023-01-13 05:40:33 +01:00
export async function populateEmojis(
emojiNames: string[],
noteUserHost: string | null,
): Promise<PopulatedEmoji[]> {
const emojis = await Promise.all(
emojiNames.map((x) => populateEmoji(x, noteUserHost)),
);
return emojis.filter((x): x is PopulatedEmoji => x != null);
}
2021-03-22 04:41:33 +01:00
export function aggregateNoteEmojis(notes: Note[]) {
2023-01-13 05:40:33 +01:00
let emojis: { name: string | null; host: string | null }[] = [];
2021-03-22 04:41:33 +01:00
for (const note of notes) {
2023-01-13 05:40:33 +01:00
emojis = emojis.concat(
note.emojis.map((e) => parseEmojiStr(e, note.userHost)),
);
2021-03-22 04:41:33 +01:00
if (note.renote) {
2023-01-13 05:40:33 +01:00
emojis = emojis.concat(
note.renote.emojis.map((e) => parseEmojiStr(e, note.renote!.userHost)),
);
2021-03-22 04:41:33 +01:00
if (note.renote.user) {
2023-01-13 05:40:33 +01:00
emojis = emojis.concat(
note.renote.user.emojis.map((e) =>
parseEmojiStr(e, note.renote!.userHost),
),
);
2021-03-22 04:41:33 +01:00
}
}
2023-01-13 05:40:33 +01:00
const customReactions = Object.keys(note.reactions)
.map((x) => decodeReaction(x))
.filter((x) => x.name != null) as typeof emojis;
2021-03-22 04:41:33 +01:00
emojis = emojis.concat(customReactions);
if (note.user) {
2023-01-13 05:40:33 +01:00
emojis = emojis.concat(
note.user.emojis.map((e) => parseEmojiStr(e, note.userHost)),
);
2021-03-22 04:41:33 +01:00
}
}
2023-01-13 05:40:33 +01:00
return emojis.filter((x) => x.name != null) as {
name: string;
host: string | null;
}[];
2021-03-22 04:41:33 +01:00
}
/**
*
*/
2023-01-13 05:40:33 +01:00
export async function prefetchEmojis(
emojis: { name: string; host: string | null }[],
): Promise<void> {
const notCachedEmojis = emojis.filter(
(emoji) => cache.get(`${emoji.name} ${emoji.host}`) == null,
);
2021-03-22 04:41:33 +01:00
const emojisQuery: any[] = [];
2023-01-13 05:40:33 +01:00
const hosts = new Set(notCachedEmojis.map((e) => e.host));
2021-03-22 04:41:33 +01:00
for (const host of hosts) {
emojisQuery.push({
2023-01-13 05:40:33 +01:00
name: In(
notCachedEmojis.filter((e) => e.host === host).map((e) => e.name),
),
host: host ?? IsNull(),
2021-03-22 04:41:33 +01:00
});
}
2023-01-13 05:40:33 +01:00
const _emojis =
emojisQuery.length > 0
? await Emojis.find({
where: emojisQuery,
select: ["name", "host", "originalUrl", "publicUrl"],
})
: [];
2021-03-22 04:41:33 +01:00
for (const emoji of _emojis) {
cache.set(`${emoji.name} ${emoji.host}`, emoji);
}
}