@Blog

検索から生成AIへ。

2024.01.16

Logging

おはようございます、今年は検索から生成AIへシフトする感じになりそうですね。Gさんで実験で運用されている検索と生成AIの中間の技術があるのですが、それが春頃にリリースされると思います。今回は実験で終わらないと思います、理由はBingではすでに導入済みの技術になるからです。

この技術、生成AIという技術はOpenAI社が世界に広めたのですが実際、Gさんは既に技術的には持っていた技術だと自分は思っていて単なるリリースが後追いになっただけの話だと思います。

Gさんは人の指示を理解して家事などが出来るロボットを開発しているのを公開したのが、1年か2年ぐらい前だったと思います。その頃には生成AIなどプロトタイプは出来ていたはずです、なので、Gさんのラボではまだ未発表の技術がかなりあると思います。

生成AIのことをGさんが失敗と捉えたかがこの先の先進的な技術の公開時期が決まりそうですね、昔は実験的なことをやっていたのに、この頃は昔に比べて慎重になっていたGさん。今年のGさんの動向は注目ですね～。

明日へ続く。

タグ

bing, OpenAI社, プロトタイプ, ラボ, リリース, ロボット, 中間, 先, 動向, 失敗, 実験, 家事, 導入済み, 後追い, 技術, 指示, 昔, 春頃, 未発表, 生成AI,

クローラーするサービスの基礎。

2016.11.19

Logging

クローラーするサービスの基礎のソースを載せときます。殆どサイボウズ・ラボの人が書いたコードです。
このサンプルソースをそのまま貼り付けても一階層のリンクしか取得できません。
再帰処理の部分をコメントアウトしているからです。ちなみにコメントアウトを外してもメモリオーバーでおそらく
大体のサーバでエラーが出力されます。どうしたら良いのかといえば、DBに1階層目のリンクデータ、2階層目のリンクデータという様に保存する機能を施す。次にajaxで階層を受け渡しながら、再帰処理を行う。
再帰処理が終わる要素はそれ以上、下階層がないことを判断する。そのためには保存したデータを検索することが重要になる。＝（イコール）
新規にデータを登録しているうちは、再帰処理を終わらせないようにすることが大事になる。
これの機能を加えることで巡回する事が可能になる。ここで注意しないといけないのが、外部リンクを保存しないことです。外部リンクまで保存していると巡回は永遠に終わらないでしょう・・・。
トイウコトデ
ほぼ？？コピペソースを貼っときます。

<?php
echo json_encode($obj);
exit;
function get_linkarray($link)
{
	$context = stream_context_create(array("http" => array("method" => "GET", "header" => "User-Agent: simplecrawler.library.php 0.0.1")));
	$resultR = array();
	$resultS = simplecrawler($context, $link, $link, parse_url($link));
	foreach ($resultS as $k => $v) {
		$resultR[] = $v;
	}
	return $resultR;
}
function simplecrawler($context, $link, $burl, $base, $linkArrayDat = array())
{
	$linkArrayPre = crawler_link(crawler_page($link, $burl, $base, $context), $link, parse_url($link));
	foreach ($linkArrayPre as $k => $v) {
		if (!isset($linkArrayDat[$v])) {
			$linkArrayDat[$v] = $v;
			//$linkArrayDat = array_merge($linkArrayDat, simplecrawler($context, $v, $burl, $base, $linkArrayDat));
		}
	}
	return $linkArrayDat;
}
function crawler_page($link, $burl, $base, $context)
{
	if (strpos($link, $burl) === 0) {
		$page = @file_get_contents($link, false, $context);
		return $page === FALSE ? null : $page;
	} else {
		return null;
	}
}
function crawler_link($page, $burl, $base)
{
	$linkArray = array();
	if ($page === null) {
		return $linkArray;
	}
	preg_match_all("/[\s\n\t]+href\s?=\s?”(.*?)”/i", $page, $href);
	for ($i = 0; $i < count($href[1]); $i++) {
		$link = $href[1][$i];
		if (preg_match("/^http(s)*\:\/\//", $link)) {
			$result = $link;
		} elseif (preg_match("/^\/.+$/", $link)) {
			$result = $base["scheme"] . "://" . $base["host"] . $link;
		} else {
			// echo $base["path"] . “\n”;
			$b = preg_split("/\//", dirname($base["path"]));
			$t = preg_split("/\//", $link);
			foreach ($t as $v) {
				$l = $v === "." ? true : ($v === ".." ? array_pop($b) : array_push($b, $v));
			}
			$result = $base["scheme"] . "://" . $base["host"] . join("/", $b);
		}
		$linkArray[$result] = $result;
	}
	return $linkArray;
}

タグ

１, 2, ajax, db, アウト, イコール, うち, エラー, オーバー, クローラー, コード, ここ, こと, コメント, これ, サーバ, サービス, サイボウズ, サンプル, ソース, それ, ため, データ, トイウ, メモリ, ラボ, リンク, 一, 下, 事, 人, 保存, 再帰, 処理, 出力, 判断, 取得, 可能, 基礎, 外部, 大事, 大体, 巡回, 新規, 検索, 機能, 殆ど, 永遠, 注意, 登録, 要素, 部分, 重要, 階層,

チームラボの展示会が徳島であるだけどハードルが高い。

2016.02.29

Logging

チームラボの展示会が徳島であるだけどハードルが高い・・・。場所はあすたむらんど徳島です。そこでデジタル・アート展が行われるだけど下記の動画のようなのが展示されるらしいだけど・・・・。
観に行きたいだけど、これって男一人では観に行くのハードルが高いなぁ・・・・。こんなとき誘う子がいれば良いのだけど今のところいないです。ネットで募集しますっていうのはパターンもありますが、おそらくこないだろうなぁ。
全然、TwitterでDM（設定変更済）くれても良いですよ。その代わり無口で喋るのが下手なのがそれが嫌にならない方、限定ですが(´Д｀)。
どうもこれは・・・ひとりで観に行くのはちょっと難しい気がする。そんな事を言いながらぼっちで観に行くかもしれませんがぼっちで電車に揺られバスに揺られながら徳島に行くのは帰りが切ないなと・・・・。

彼女がいればなぁ・・・とか思います。
でも、婚活はしたくないですよね・・・あまり、いきなり、それは重いからね。恋活も恋活で・・・なんか嫌なんですよね。たまに恋活したほうが良いのかなぁとか思ってます。
ちなみに恋活（恋しよ）というサイトが高知県にはあります。
登録しているかどうかはご想像にお任せします。
登録だけして行動に移さないことはいっぱいあります。
行動に移さないのは、本当に気の許せる人しかっていう
タイプなのが駄目なんでしょう。変わらないとなとは思うだけど
変わらないですね・・・・。
(´Д｀)人をあまり信用していないですね。
話が逸れましたので元に戻して
徳島に見に行くかはわかりませんが
teamLABの作品は本当に綺麗なものが多いので
オススメですよ(｀・ω・´)
?

タグ

```, ｀), ｀)。, )。, アート, あす, おすすめ, こと, これ, サイト, それ, タイプ, たま, チーム, デジタル, とき, ところ, ネット, ハードル, パス, パターン, ひとり, ほう, むら, もの, よう, ラボ, 下手, 下記, 代わり, 作品, 信用, 動画, 募集, 場所, 変更, 展示, 帰り, 彼女, 徳島, 想像, 無口, 登録, 綺麗, 行動, 設定, 限定, 電車, 駄目, 高知,