Round Here

단단한 돌밭. 쇠스랑, 방금 산 쟁쇠, 삽 다 이빨 먹히지 않는다. 곡괭이로 뽀개고 나서야 쇠스랑이나 삽 이빨이 들어간다. 삼일 전 아래 밭에 조그만 두 이랑을 만들었다. 많은 돌이 나왔다. 이곳은 좀 심하다. 어제 처, 동생과 같이 윗 밭에 이랑을 하나 만들었다. 아래 밭 보다 땅이 연해 파기는 나았지만 역시 돌 풍부하다. 금년 텃밭은 이 정도로 하고 내년에 기계를 써 제대로 돌고르기, 쟁기질, 로타리를 부탁해야겠다. 심은 나무들에 물을 주었다. 몇일 전에는 근처 블루베리 농장에서 산 블루베리 2주, 아재가 준 블랙커런트 3주를 블루베리 주위에 심었다.

블루베리 3주 심을 터를 마련하고 이미 배송된 2주를 심었다. 다음 것은 리스크관리로 이번 형태와 달리 터를 만들고 심자.. 아재가 좀 쉬어가며 하라 한다. 그래야겠다.

지난 토요일과 오늘에 걸쳐 백합(튜립)나무 11주, 밤나무 4주, 왕다래 2주를 심었다. 튜립나무는 산에 심었는데 온통 칡, 환삼덩굴, 풀들이 엉켜 있어 이들을 벗겨내며 하느라 힘들었다. 환삼덩굴 가시는 바지와 장갑을 뚫어 괴롭다. 튜립나무에도 표시용 말뚝을 함께 박았다. 나중에 얘네들도 제초매트로 보호해 주자. 이번에는 이들을 잘 키워 칡, 환삼덩굴 같은 놈들을 제압하고 산을 산같이 만들어 보자. 250L 피트모스, 50L 펄라이트, 20L 즈음의 왕겨로 노지에 블루베리 3주를 심기위해 물을 뿌려가며 피트모스를 분쇄하고 섞었다. 오늘도 친척 할아버님께서 나오셔서 무엇을 하는 지 궁금해 하신다. 섞는 법을 가르쳐 주시며 자신이 직접 시범해 보이시겠다고 하심. 아흔 중반인 분께서... 참 건강하고 활기찬 ..

그제, 오늘 이틀에 걸쳐 사과나무 12주, 대추 6주, 감 3주, 살구 8주, 복분자 7주, 오디 4주, 다래 6주, 보리수 2주, 그리고 개나리 20주를 심었다. 한 나무 종류당 품종이 2 ~ 6 이 되기에 계획을 잘 세워 심어야 했다. 넒게 심었다. 그제는 동생네와 우리 4명이 해서 3시 즈음에 끝났지만 오늘은 나 혼자 했기에 9시 ~ 18시 까지 쉬지 않고 해야했다. 허리... 이 돌 밭. 그래도 계획했던 것 다 해서 기분 상쾌하다. 나무 종류에 따라 교과서대로 심었는데 어떻게 될지. 그제 물을 흠뻑 주어서인지 오늘 가 보니 흙이 많이 가라앉았다. 흙을 최종적으로 원하는 높이만큼 추가로 북돋아주고 다시 물을 흠뻑 주었다. 올라오는 길 가에 개나리를 심었는데... 잘 살아 예쁜 길이 되면 좋겠다.

물 웅덩이에 펌프를 설치했다. 잘 나온다. 호스 길이가 짧아 끝까지 닿지 않지만 많은 부분을 커버할 수 있다. 물 걱정을 덜어 마음이 가볍다. 두번째 주문한 묘목들이 왔다. 나무 심을 구덩이를 대충 파 놓았다. 곡괭이질 많이 했다.

여러 종류의 나무들을, 여러 품종들을 심는데 어떻게 하면 좋을까? 나무 간격, 수분수, 관리하기에도 편리해야 하는데. 오늘 첫번째로 배달되온 묘목들을 가식했다. 땅 상태를 가늠하기 위해 여러 군데를 삽으로 파 보았다. 몇일 전 풀과 큰 돌을 걷어내고 포크레인이 좀 털었지만 조금만 파도 여지 없이 돌맹이들을 만난다. 역시 이곳은 돌맹이 밭. 맞아. 전에 구덩이 팔 때 몹시 힘들었어. 왜 잊고 있었지? 아재가 말하길 "여긴 삽으로 안되. 곡괭이를 써야지" 하며 곡괭이를 건네 주었다. 훨씬 낫다. 연장이 중요하다. 그럼에도 힘들다. 신나게 곡괭이질 하게 생겼다. 아고. 첫번째 나무 심을 구역을 표시했다. 나무 간격을 4.5 ~ 5m 정도로 생각하고. 밀식할 수도 있지만 땅은 넓고 내 능력은 젬병이다. 나무 사..

지난 주에 밭을 고르었다. 이랬던 밭이 예쁘게 바뀌었다. 이제는 제초매트를 깔 수 있겠다. 윗쪽 경사면에는 주로 나무를 심고, 아래 평평한 곳에는 고구마, 옥수수, 토마토, 채소, 허브, 꽃 등 갖가지 식물을. 꽃나무도 심고 싶은데 무엇이 좋을지. 산에서 흘러 내려오는 물이 어느 한 곳으로 집중되지 않고 분산되도록 배수 정비를 했다. 그럼에도 자연섭리 대로 흐르는 물이라 내가 할 수 있는 것이 제한적이다. 어제는 새로 산 펌프에 호스, 전선, 32-15mm 배관 변환 부싱을 연결해 가동 시험까지 하려 했는데 다 끝내지 못했다. 펌프 대리점에서 32-15mm 배관 변환 부싱 같은 것들이 철물점에 가면 있다고 해 근처 몇 군데 갔었는데... 개뿔. 취급 안한다고. 결국 다시 마을로 와 근처 철물점에 가서 어..

LLM Explorer LLM Explorer: A Curated Large Language Model Directory. LLM List. 20442 Open-Source Language Models. Browse 20442 open-source large and small language models conveniently grouped into various categories and llm lists complete with benchmarks and analytics. llm.extractum.io Chatbot Arena 서베이_@2023

처음에 Attention .. 논문을 읽고 computation 흐름, 특히 행렬연산 흐름을 정리했던 내용. 이후에 나온 인터넷 자료들 (The Illustrated Transformer, The Annotated Transformer) 의 내용/그림을 추가해 작성. 오랜만에 다시 보니 영 .. 설명이 별로다. 만들 때는 나중에 다시 볼 때 금방 생각나도록 신경 써 했건만. 첨부:

GPT-4의 아키텍쳐가 Mixture of Experts (MoE) 구조를 갖고 있다는 얘기가 퍼져 있었다. 여기 말대로 느슨한 (Loosely connected, 또는 Sparse) 한 전문가들의 연합으로 Monolithic 구조보다 더 나은, 더 효과적인 인공지능에 다가설 수 있을 것이라는 생각은 정말 오래 되었다. 내 대학원 당시에도 그랬다. 이는 지구에 있는 모든 고등 생명체의 지적 활동이 MoE 구조를 갖는 프로세서에 기반하는 사실에서도 감을 잡을 수 있었다. 문제는 늘, 어떤 전문가들이 어떤 경우에 필요하고, 이들을 어떻게 얻나 (개별 훈련, 함께 훈련)? 전문가들의 전문성/독립성 대비 compliance 특성을 어떻게 가져가야 하나? 이들을 어떻게 coordinate 해야 하나? 등등. 전혀..